●余峰：用科学的方法保证考试测评的质量_自考专本|专升本|高升专|高升本|在职研究生-学历教育网

2021年12月22日下午，由ATA公司主办的“国际考试与人才测评发展的趋势与创新—暨第五届国际考试理论与测评技术研讨会”在北京国际饭店会议中心隆重举行。来自政府主管部门和行业协会的有关领导，以及国内外知名大型企业、金融机构和相关企事业单位的500多名嘉宾出席了本届研讨会。美国教育考试服务中心ETS托业考试全球管理总监余峰博士做主题为如何保证高质量的考试ETS托业考试在全球的发展和运营情况的演讲。

美国教育考试服务中心ETS托业考试全球管理总监余峰博士做主题演讲

余峰：考试这是学校的事情，以前确实是，教学和测评这是学校的。现在随着中国企业的发展，二三十年前企业来料加工，对于人才概念并没有这么强烈，招工的时候只要是人来了培训两天就上岗，现在不一样了，随着企业的发展，企业从来料加工产品模仿到自主开发，更重要的一个是人才，对人员员工素质的问题，把合适的人放到合适的位置上，说起来很简单，在座不少是企业人事部门、政府执业考试部门的人，达到这个目的非常难。任何考试考分有一个含义，小时候老师老骂我，人家都考满分天才，一百分等于天才，这是一个含义的问题。他错了吗？当时大家觉得没错。但是对于人才这个概念来讲，这个含义不一样，主要原因是考试分数的含义。你想把合适的人放到合适的地方，首先考评的含义是什么。我想围绕这个主题跟大家探讨一下从ETS的角度来讲是怎么来控制质量的。很多人认为考试谁都会出卷子，但是不是这么简单的事情。就像任何行业都有一个质量控制的手段和方法，在考试这个行业也有这么一个手段和方法，尽管具体的做法不一样，但实际它的概念是完全一样的。麦当劳是怎么控制质量的？它有一个流程，它的流程就是说汉堡包多少时间几分钟在哪里，不管走到全世界各地，这个流程是完全一样的，它的质量稳定程度全世界各地都是一样的，它是这样来控制它的稳定性的，从考试的角度来讲也有类似的概念。

什么是考试质量？任何一个考试有它的局限性，考试不可能把所有人的能力都考出来，一个考试达不到它的要求。你要想做到这个东西，你连续考一辈子，把各种各样的活动能力、数学能力、语言能力都考出来，可能需要考一辈子。每个考试只能考某些非常局限的就像张教授讲的有限度的纬度，数学考试就是考数学，要是语文考试就是考语文，不可能把所有东西加起来再一个考卷里面考，那是不可能的。好质量的考试它不仅仅能够准确评估它想评估的能力，同时把一些不想评估的能力降到更低点。数学考试加一大堆古文在里面，考察数学能力，结果把一堆古文加进去，古文的能力影响到数学能力的发挥，达不到这个要求。前一段时间当时国内有一位访问学者到我们这儿来给我看了一个中文考试给外国人的，很多美国人现在学中文，他说你看一下这样的考试能不能在美国推广？我看了一道题就说你们必须改，他们当时写的是秦始皇的出生时间。你考中文，美国人学基本中文，目的是看他能不能说你好，你把历史文化都加到一个中文考试里面，你不愿意考的变量影响了你想要考的东西，所以一个好的考试不仅能够准确来评估你想要考的能力，同时把不想考的能力降到更低点。

职业考试的目的通过与不通过，合格了比如医生医**毕业临床实习完了你要考试，考完以后过了那么就变成可以有执照的医生。这个考试的目的，你通过不通过有一个更低的标准线。还有一种考试是把所有的考试区分开来，你成绩很好、中等、一般，考试的目的是把学生在同一个标尺上区分开来，它的目的不一样。一个好的考试能够看你能不能达到你想要达到的目的，除此之外还有一个考试必须公平，考试必须稳定程度要好。1979年的()化学考试，我当时还在高中，我记得那年化学考试考到60分那就是天才了，到那自考考试我们考90分还不是什么人物，现在当然高考已经发展非常好了，但是这么多年以前稳定程度不太好。好的考试有一个公平性、稳定性还有一个准确性，这些因素都是决定考试好与不好的问题。你在评估控制考试质量的时候，这些都是衡量考试好坏的标准。考试质量评估不是说有一个起点有一个终点，它没有起点没有终点，是一个循环式的，任何时候你都必须保证每一个步骤保证质量。就像一个流程控制一样，任何组装，比如生产一辆汽车，这个组装线上从零件进来到整车出去都有一个流程，在每一个流程的环节上都包含着质量控制，所以考试的角度来讲也是这样的。大家比较熟悉的效度和信度，各位专家在这儿我也就不多说了。还有一个考试的公正性、公平性，教育测评行业中国更感到自豪，几千年前中国第一个用了考试作为标准考试来选拔人才，确实是这样的。为什么要考试，为什么标准化考试？标准化考试是提供公平的平台，让所有的人不管他的背景怎么样，家庭情况怎么样，教育程度怎么样，有一个共同的平台使得他能够得到往上走的机会。哈佛**校长觉得学校的学生越来越差，当时学生都是富裕家庭的孩子比较有钱，都是从欧洲移民过来的在新英格兰地区的白人家庭。孩子的创造力下降，作为学生的创造力下降就不可能长久。孩子的创造力下降，为什么？孩子的生源太窄，要招全球更好的学生，不管穷、富，不管他的文化背景是什么。怎么办？创立了ETS，目的是为了能够开发标准的考试，使得所有的人不管你的背景怎么样，都有一个共同的平台显示你的能力。随着中国企业走向国际化的话，公平性越来越大，不光考虑到文化的公平性，还有对于人才选拔的公平性。企业对社会价值的贡献是越来越大，在考评上面的公平性是越来越高。还有一个步骤是数据分析，证明你结论的正确性或者改进质量，整个过程是一个循环的过程。有各种不同的方式方法来控制质量，我们当时学的时候觉得有一个很好的数学模型就像数学模型一样把质量控制，实际这是一个偏见，如果进来的数据进来一大堆是垃圾的话，你出来的结果会好吗？不会好。任何数学模型只是把潜在的现象显示出来，但它不可能把你没有的东西变成有的，数学模型只能做到这个地步。你的质量控制必须从数据的采集开始到成绩的汇报这一条线必须从头在考试设计的时候连在一起考，而不能说我卷子已经出了，考试也考了，拿回来以后就问张教授，你看有没有什么魔法给我的数据分析一下得到一个结果。这是不可能的。整个过程必须是连在一起的。