刘舒
讯飞易听说执行总裁,浙江大学应用数学与计算机视觉硕士毕业。在人工智能、在线教育领域有深厚的积累和独到的见解。
资料来源:深圳市届高中英语教师培训大会
编者按:深度好文
深圳市届高三英语教师培训大会在深圳大梅沙海景酒店顺利召开,讯飞易听说执行总裁——刘舒作为英语听说考试特约专家应邀参加此会议,并做出了报告。在报告中,刘舒总分别从以下几个方面做了解读:
1、人工智能在听说考试中的应用;
2、计算机评分原理讲解;
3、广东高考英语听说考试备考技巧指导;
4、英语听说课程大纲介绍。
精彩现场:
大家好,我是刘舒。
很高兴今天能在这里,参加深圳届高三英语教师培训大会,我今天想跟大家分享的是关于计算机评分的原理,以及基于此原理下,在平时的教学和训练过程中老师和学生应该如何做准备。
“一、人工智能在听说考试中的应用”
在座的各位应该都知道,科大讯飞作为亚太地区知名的智能语音与人工智能上市企业,在语音合成、语音识别、口语评测、自然语言处理等多项技术上拥有国际先进的成果。智能口语评测技术是经国家语委鉴定并在全国大规模推广应用的技术成果,这项技术最早是于年应用在全国的普通话考试,后来我们再从中文的评测应用推广至英语的评测当中来。
计算机评分的有效性和应用情况
关于计算机智能评分的有效性,我们在广东省考试院的组织下做过一次对比验证,基于年和年高考考生实测数据,通过与专家评分一致性的对比来比较计算机和阅卷员人工评分的有效性,得出的结论是计算机评分与专家评分的一致性度达到98%,完全符合考试评分要求。
这里的验证其实是包括两方面,一方面是考生的得分排序,比如说考生A的得分要比考生B高;另一方面是单个考生的得分绝对值。无论从哪方面来看,计算机评分与专家评分都达到了高度一致。
其次,从客观上来看,计算机评分有哪些优势:
计算机不需要休息,稳定性比人工评卷要高。
计算机评分大大节省了阅卷的时间成本和人力成本。
鉴于此,该项技术最终得到了广东省科技厅和教育部考试中心的鉴定,在高考的评卷工作中得到大规模使用。
智能评测技术不止服务于广东省,还包括其他高考的省份,和中考的各个市,到目前为止,已经累计服务了万人次。
这项技术对于未来高考的改革有什么意义?
第一,人机对话的听说考试和计算机阅卷这种技术的推广应用有助于一年多考政策的落实。高考的改革趋势是一年多考,这种技术的应用和推广可以节省考试成本,提高评分效率。
第二,方便组织大面积的考试,实现全程网络化管理,组织便捷,节省组织成本。
第三,该技术本身是测评属性,测评结果不仅是学生分数的反馈,也同时可以实现多维度输出。学生可以通过测评的结果进行针对性的纠正和提高,真正实现从诊断测评到自适应学习的以测促学模式。
“二、计算机评分是如何进行的”
为了理解机器评分原理,我们先来回顾一下专家评分的过程。
对于一份考生作答的音频录音,首先,专家会从整体考核录音的完整性,即是否完整地读完一句话的每个词,是否有遗漏或多读。
其次,专家会对考生朗读过程中的停顿、连读、重读、语调等诸多因素作考核。
最后,对于开放式作答,例如PartC的故事复述,专家还会对考生朗读的语法、语义及表述逻辑进行考核。
智能评分的核心理念,就是通过人工智能技术,训练计算机,让机器具有和评分专家一致的评分能力。
具体来说,智能评分系统收集到一段语音之后会首先把语音转成文字,然后对比该文字与答案文本的匹配度进行打分,首先实现对于完整度的判断。
其次,会从语音中抽取多个维度特征,例如重读、停顿、语音语调等,与评分标准进行匹配。
最后,评分系统会通过深度神经网络技术,对该段语音中的语法、语义等开放式的内容作评测,综合得出最终的得分,达到与评分专家的评分过程及结果高度一致。
“三、基于该评分原理,如何备考”
(一)人机对话考试的整体要求和注意事项。
人机对话的考试形式对很多同学来说都是第一次,同学们由于平时练习的时候缺少一个真实的环境,所以正式的考试中经常会忽视这些细节,而这往往是主要的失分点。
注意事项:
佩戴耳机要注意。麦克风距离嘴大概2公分,并且要平行,这样方便录音的采集。调好之后,就不要动了。
作答的时候,不要抢答。要在开始录音之后才开始回答,切勿在准备时间进行作答。
朗读时要清晰大声。发音清晰、声音洪亮、抑扬顿挫的声音是计算机比较偏好的。并且答题的时候不要加太多无关的废话进去。
这些是考试操作的一些细节,我们建议同学们平时在训练的过程就要通过高度仿真的环境来模拟练习。
(二)针对三大题型,如何掌握科学的备考方法?
PartA模仿朗读
实际上是包括两个大的维度,一个是发音基础,一个是朗读技巧。发音基础考核的地方在于难音、连读、失去爆破,在朗读技巧则考核重读,语调、意群停顿。
通过过去几年的一些数据积累,我们发现拉开模仿朗读差距的两大因素是语调节奏和意群停顿。可以从2个具体的实例来看,
(此处略去学生A和学生B的录音)
学生A的得分是13分(满分20)发音基本及格,但是朗读的时候没有注意到意群停顿和语调节奏。
而学生B的得分是18分(满分20分),不仅发音准确,在朗读的时候语调节奏和意群停顿掌握得非常好。
PartB角色扮演
主要考察的点是抓取信息,笔记技巧,以及问句翻译。
抓取信息包括事实细节、中心话题、逻辑推测、观点态度等。
笔记技巧包括列框架、记重点、排版清晰、符号辅助等。
问句翻译包括疑问句与陈述句的转化、人称、时态、冠词介词等。
PartC故事复述
第三部分,故事复述,其实也是最难的一部分。故事复述考察的技能是组句、连篇、笔记。
PartB和PartC都考察了一个特别重要的能力,即,快速记笔记的能力,笔记速记和排版是拿分重要的辅助手段。
“四、英语听说特色课程”
E听说专业从事听说考试服务多年,我们不仅在评测方面做了很多技术方面的积累,同时也在教学和备考阶段进行了深入研究。
在对多个省市的高考和中考题型进行解剖之后,我们与各省市的教研专家共同研发了一套专门针对英语听说的特色课程。这个课程实际上是将英语听说的能力抽象出来,针对不同的能力进行针对性教学。
整套特色课程涵盖了课前诊断、课中授课、课后复诊三个环节。经过对多位学生的真实测试,学生仅需通过10个课时的专项教学,听说成绩即可提升20%。
以上便是今天所有的内容分享,我们接下来将会与各省市教研老师投入更多的精力在听说特色课程的研发和应用上,希望能将这套特色课程普及至全广东省,届时这套教材以及整套教案我们都会一并给到老师,做到真正从教学和评测两方面,帮助学生提升英语听说能力。
以上内容及图片来自原创,
如需转载,请联系我们。
预览时标签不可点文章已于修改收录于话题#个上一篇下一篇转载请注明:http://www.baoshijiec.com/ylzz/6198.html