印象笔记Evernote

Gene Kerns:现代测试理论——在能力边界上提出问题

2018.11.20

芥末堆 9蛋 11月20日报道
11月15日,在以“碰撞·演变”为主题的GET2018教育科技大会上,Renaissance Learning副总裁兼首席学术官Gene Kerns分享了题为《事半功倍:现代测试理论的潜力》的分享。他认为,在能力边界上提出的问题才是测试最需要提出的问题。
以下为GeneKerns演讲实录:
今天我想跟大家分享一下我认为的教育领域的最伟大创新。
我们先看一下这个词innovation,创新。创新的定义是什么,当我们提到这个词的时候,想表达什么意思?我们认为,可以实现两件事,才能算是一个创新。
首先第一点,就是我们必须要有新的内容,并且要达到规模,如果没有一定的影响力也不算是创新和趋势,只能算一个发明。
下面我想重点介绍其中之一——计算机自适应测试。
有些人喜欢将计算机自适应测试称作“现代测试理论”,在我们这个世界上,大家总喜欢新、现代、先进这些词,所以和它相对比,我们就有“经典测试理论”或者说是“传统的测试理论”。
当我们讲“经典测试理论”的时候我们在说什么呢?经典的测试理论首先要明确你想评估的是哪些技能。第二步是我们在每一个技能里需要管理5-7个题目,5-7个题目可以确保得到一个可靠的分数,如果我们只问一个问题或两个问题,可能他们是猜对的。这种测试方式广为人知,很多大学都是用这样的方式进行考试的,而且也的确非常的可靠。
对于老师来说,因为老师非常清楚他们要做什么,所以测试的透明度非常高。但同时也会有一些劣势,其中一个劣势就是当你想考察多项技能的时候,需要让学生做非常多题目。比方说我想测试一百个技能,那么这个时候,可能就会有五六百道题目要做,试卷就会变得非常复杂。  
而对学生来说,传统考试方式让一些学生很容易碰到天花板。什么意思呢?因为如果题目不多的话,考试的筛选度可靠性就会非常低,所以有一些非常出色的学生会很容易达到天花板。
但是计算机自适应考试是什么样呢。我们从左侧的纵轴是从易到难,横轴是学生需要回答多少道题,绿色是表示正确、红色表示不正确。所以我们先问一个问题,如果学生做对了,我们就会给他一个比较难的题目;如果又对了,我们就会问一个更难的题目。这时候第三个题学生答错了,接下来会出现一些其他问题。所以随着测试的推进,我们会发现出现了这样一个曲线图。
我们会发现,在能力边界上提出的问题是最重要问题,不然如果学生的题目都做对了,或者都做错了,你很难知道他的能力处在什么位置。所以通过计算机自适应考试,我们问一个题,就相当于我们在传统考试里文两道题甚至三道题。我们希望能够借此减少学生的压力,减少学生在考试里花的时间。
通过这种自适应式的测试,学生不只是拿到了分数,还可以看到自己哪部分技能、哪些东西是还需要再学习的,是需要进一步加强打造的。
那现在还有哪些挑战呢?挑战就是,如果想去打造一个新的考试体系的话,我们是需要一个非常大的题库的,只有这样,我们才可以根据学生水平选择具体的试题。还有一个可能的缺点就是它的透明性不够,很多不明白它背后的逻辑是什么,就会产生质疑。
但我们认为,真正有影响力的创新是可以帮助我们节约很多的预算、时间,并且让效果最大化的。而这也是我们一直在寻找的东西,谢谢! 
点此查看所有嘉宾精彩分享>>

下载大会专属笔记模板
在印象笔记里轻松做会议记录吧~

印象笔记是一款风靡全球的免费笔记应用,是全球 2 亿人的工作空间。你可以使用任何一台设备打开印象笔记,在这里专注完成写作、收集有用信息、快速发现所需、随时演示想法。

印象笔记企业版印象笔记专为团队打造的版本,致力于为教育培训机构打造强大、易用的云端教学资源库。清华大学、中国科学院、新东方在线、帝尔私塾国际英语等众多教育培训机构都是印象笔记企业版的深度用户。

新技能get√

长按并识别以下二维码,关注【我的印象笔记】微信号,即可永久保存嘉宾完整分享内容。