大规模网上作文评分的信度研究—CEPT写作评分一致性检测.pdf

湖南大学
硕士学位论文
大规模网上作文评分的信度研究—CEPT写作评分一致性检测
姓名:师艳芹
申请学位级别:硕士
专业:外国语言学及应用语言学
指导教师:肖云南
20090420
摘要本研究从年潞洗笱в⒂锓旨犊际宰魑牟馐灾兴婊槌份考卷,涵盖鲂醋魅挝瘢⒂位评分员对试卷进行了第二次评分,评分采用了“二假定每个评分员有独立的评分量表,这种模型可以用来考查评分员对评分个评分员的评分严厉度及评分员对评分标准的把握是否保持一致,然后运用偏差分析探讨单个评分员在不同的写作任务上是否具有评分一致性。通过分析,本研部一致性较好,但评分员之间的一致性较差;第三,所有评分员在评阅不同的写分析对评分量表解释有歧义或不准确的地方进行修改;其次,对评分一致性不高的评分员进行再培训,指出并纠正其缺点;最后,由于大规模考试对考生具有很高的利益攸关性畇,建议对考生分数进行分析以调整其差异显在大规模考试作文评分中,对误差的控制是十分必要地。控制误差主要是确保评分员内部一致性及评分员之间的一致性。通过利用多侧面P偷砑云婪植钜旖蟹治觯菽夂现岛推ú钪道醇觳馄婪植灰恢碌钠婪员,对他们进行再培训或予以更换,以此来保证大规模考试作文评分的信度。关键词:信度;评分一致性;多侧面P停谎侠鞫龋黄婪直曜迹籉评分不一致是影响评分信度的主要因素。本文通过评分一致性检测来研究大规模网上作文评分的信度。以湖南大学英语分级考试作文测试为研究对象,采用嗖嗝鍾模型,通过分析评分员内部一致性及评分员之间的一致性来研究评分的信度。读法K玫氖堇肍砑蟹治觥Q芯坎捎玫哪P即标准的理解和使用是否存在显著差异。本文首先运用主层面分析检查单究得出以下结论:第一,评分员的严厉度水平存在显著性差异;第二,评分员内作任务时保持了内部一致性,无显著偏差,但总体严厉度不高;第四,部分考生的分数经分析后得出的平均分与原始分存在差异。本研究对如何提高写作评分的一致性提供如下建议和参考:首先,根据数据著分数,这也正是本研究的一个尝试和创新。人土见模鹤髫称婪值男哦妊芯ぶ瘢杭品忠恢录洳.
.,—顺学位论文甌猻—·簍瑂,,瑆.’’,.;琹··,’瑆,甀琣
·.;
⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..Ⅵ顾貉宦畚
⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..人规模鹤魑钠婪值男哦妊芯骷品忠涣病毫...........................................................................】【........................................................................................................................................;...........
篢::—颁学位论文:篊猙篊—::篍篏:篒篖篛篢
别币签轹肖之矽日期舛:占月门啼杨气日期:加,甓耲日作者签名:啼旅獗期:沙怦聄日学位论文原创性声明湖南大学学位论文版权使用授权书得的研究成果。除了文中特别加以标注引用的内容外,本论文不包含任何其他个人或集体已经发表或撰写的成果作品。对本文的研究做出重要贡献的个本学位论文作者完全了解学校有关保留、使用学位论文的规定,同意学校保留并向国家有关部门或机构送交论文的复印件和电子版,允许论文被查阅和借阅。本人授权湖南大学可以将本学位论文的全部或部分内容编入有关数据库进行检索,可以采用影印、缩印或扫描等复制手段保存和汇编本学位年解密后适用本授权书。朐谝陨舷嘤Ψ娇蚰诖颉啊獭本人郑重声明:所呈交的论文是本人在导师的指导下独立进行研究所取人和集体,均已在文中以明确方式标明。本人完全意识到本声明的法律后果由本人承担。作者签名:论文。本学位论文属于⒈C芸冢⒉槐C苋Α浴
瓵....甒甀.:.甀琺硕学位论文.,,,,瑂,,琣瓼瑃.“,,猵—.,琽,
甒’甀—人规模纠鹤靼┓值膄古度研究蛔骷品帧病ぁв懿,.“,琲;瑃琯甀瑃瓾,,疭.