第1页共7页编号：时间：2021年x月x日书山有路勤为径，学海无涯苦作舟页码：第1页共7页软件工程研究中的效度问题摘要在过去十年中，由于开源项目存档的可利用性，使用软件资源库构件的经验研究已经成为了流行。在本文中，我们调查了过去3年对ICSE和FSE会议记录的研究，并对其按照开源项目与专利项目，以及在这些研究中所使用主题程序的多样性进行分类。我们的调查显示，最近的经验研究中几乎有一半（49％）仅仅使用了开源项目。目前的研究或是从这些结果中得出一般性结论，或是明确否定任何超出特定主题软件的领域所得出的结论。我们得出结论，经验性软件工程的研究人员必须考虑到由于只使用几个知名的开源软件项目所引起的外部效度问题，这些对数据源选择的讨论是软件工程研究的一个重要的议题。而且，我们建议，软件资源库基准应有一个共同的研究架构，并共享经验性分析结果，这是为了更好地解决外部效度问题，并促进经验软件工程中分析软件构件的研究。分类和主题描述D2.0[软件工程]：通用通用术语效度关键词经验研究，外部效度，开源软件1.介绍在过去的几年中，软件工程研究人员充分利用了开源软件项目提供的丰富信息。研究人员已经开发了开源代码库，问题追踪器，邮寄档案列表和其他产品来进行他们的经验研究。从表面上看，这些研究的进行是为了获悉更多的软件开发状态，以及可以如何改善它。在严格审查开源软件时，这些研究中有许多得出了关于软件工程的一般性的结论。尽管这些研究结果是有用的，这类研究的作者很少就效度面临的威胁发表意见，特别是仅仅在研究现有的开源软件的时第2页共7页第1页共7页编号：时间：2021年x月x日书山有路勤为径，学海无涯苦作舟页码：第2页共7页候呈现出的外部效度问题。一些研究人员明确否认特定研究项目以外的任何结论，从而在其他方向走得太远。这两种方法都无助于提高目前的技术水准或改进软件工程中的实践。在本文中，我们探索软件工程研究中效度面临的潜在威胁，这些研究使用软件构件档案作为一个数据集。通常在讨论效度时，我们特别强调关于选择使用开源数据作为主要研究数据源时的外部效度问题。我们调查了过去几年FSE和ICSE的会议记录，以确定被发现问题的普遍性，提出了我们觉得有关改善经验性软件工程研究现状的问题，以及用何种方式可以让这方面知识的研究方法有所改进的建议。2.实验的效度对于任何类型的实验，为了给出有说服力的论据，它们必须具有高度有效性。当对一个实验效度的完整处理被更好地留给了另外的资源，这个部分可以简单应对在软件工程研究中对于内部，外部，以及建构效度的挑战。2.1建构效度建构效度是指具体的测量值是否真的模拟构成假设定理的自变量和因变量。换句话说，一个具有高建构效度的经验研究能够确保研究参数与研究问题紧密相关。2.2内部效度在经验研究中，干扰因素对内部效度是一个主要的威胁。我们的调查显示，在软件工程研究中，选择性偏差是一个普遍的问题，并且限制了这些研究的效度。内部效度对计算者来说很难处理，因为观察变量的变化可能归因为其他一些变量的存在或者变化度，这些与被控变量有联系，但没有明确地模式化变量。2.3外部效度一般地，外部效度指的是除了那些直接观察结果以外的领域，其研究或实验结果的适用性。如果一个研究的结论支持整个研究领域，那么就说这个研究具有高外部效度。在大多数科学科目中，研究者们非常重视对外部效度的研究，因为研究结果可以广泛适用于其他情况。一个给定研究的外部效度有几个方面：·研究是否在领域中推广到了其他学科第3页共7页第2页共7页编号：时间：2021年x月x日书山有路勤为径，学海无涯苦作舟页码：第3页共7页·是否存在足够的根据和论点来支持声明的普遍性·研究成果是否能验证预期的理论减轻建构和内部效度问题常常比应对面向内部效度的威胁更重要，因为解决前两者是先决条件，之后才能考虑研究结果超出进行研究的主题领域之外的普遍性。然而，每个软件工程研究应该争取一个高层次的外部效度，因为软件世界太大，太复杂了，无法全面地研究。研究人员选择研究代表性的项目，然后对其总体概括出结论是很重要的。3.研究中的开源数据随着最近...
