[求助]求中国学生英语作文自动评分模型的构建讲座资料

清风出袖

清风出袖

高级会员
2005年11月24日，应广东外语外贸大学教育部文科基地的邀请，梁茂成博士在该基地作了一场题为“中国学生英语作文自动评分模型的构建”的学术讲座，哪位C友出席了此次讲座，有没有讲座提纲或者PPT之类的资料传上来？谢谢！
 
好像中国外研中心的文老师在搞作文自动评分这方面的研究，不知其他国内的研究机构高校有没有搞这方面的探索，进展如何，相对于ETS的类似产品E-rater,我们的系统有哪些特点？谢谢识者的回帖！
 
外研社的新视野网络课件服务器版有学生写作自动评估系统，据说是美国的一个华裔博士开发的。但很不成熟！很容易被Fooled！我也想了解更多的相关知识！
 
2005年7月底在昆明举办的外研社研修班上，我问过文老师是否有基于她的口笔语语料库的写作评分研究，她说没有！
 
梁茂成的评分系统是基于LSA的，设计已经完成，软件是否做成并不清楚。
新视野的所谓测试系统并非自动评分系统。当然对客观题而言，无所谓自动评分。新视野的系统主要是从一个题库中抽题进而拼成一组试卷而已，主要是听力考试吧。
 
请问“LSA”指什么？新视野的系统有一个功能是对写作的自动评分。当学生在网页里随便输入一篇任何话题的文章并点击“评分”后，系统马上给出一个分数。系统是按照四六级写作评分标准评估的。分数范围在1－15分。但该系统不准确。我想这是因为它没有基于语料库的原因，可能仅仅是将一些统计数据和给定的参数标准进行比较，这些信息可能只是一些表面信息。E－Rater系统是基于语料库的，它可以评估语义层面的信息，它的准确率很高。但即使是E－Rater系统也会被愚弄。有一篇ETS的研究报告，我不知道如何上传和贴图。
 
回复：[求助]求中国学生英语作文自动评分模型的构建讲座资料

The study provides information on ways in which e-rater, and perhaps other automated essay scoring systems, may fail to provide accurate evaluations, if used as the sole method of scoring in high-stakes assessments. The results suggest possible avenues for improving automated scoring methods.
"Stumping e-rater challenging the validity of automated essay scoring."
http://www.corpus4u.org/upload/forum/2006022220464841.pdf
 
三楼Metell所述外研社新视野版学生写作自动评估系统，

在05年夏天外研社举办的新视野培训会议上有老师询问外研社长情况，社长作了大致的介绍，几句话带过，也没有详细介绍，说是有学术和商业秘密，不宜详述。


ETS的E-rater好像还可以rate spoken English, 在上海的一次会议上看到过ETS中国官员的演示，准确度比较高，当时（现在也是）感觉很神奇的。

但愿国人的研究早日赶上。
 
回复：[求助]求中国学生英语作文自动评分模型的构建讲座资料

以下是引用 metell 在 2006-2-23 18:13:35 的发言：
PhonePass SET 是美国Ordinate公司（http://www.ordinate.com/）发明的用于英语口语测试的专利技术。该系统集合了语音识别、语言学、心理学、统计模型技术和测试理论等多学科高新技术。应试者经过10分钟左右的电话口语测试，几分钟后就可从相关网站得知考试结果。国内已经有几个测试点了。测一次要300元左右。E－Rater也很贵，90元改两篇作文。老美就这牛，要你按规定向他提交语料，还要你交钱。国人哪，大家不管是啥道上的，齐心协力打个翻身仗吧。相关信息可访问其中国网站。http://www.phonepasschina.com/index.htm
国内不知那些博导在研究相关课题。文秋芳、梁茂成。。。？
Click to expand...
国人无高手？打死也不信！这导那导，量上已经是国际一流啦！真希望真的能导出几个让国人牛牛的东东来（当然 汉语分词除外，已经够牛啦）。咱外语界与国际接轨最紧，别老盯着无病呻吟似的理论框架啊。
 
You must log in or register to reply here.
Back
顶部