欢迎参加第25期“我来读文献”【文章阅读】活动
本期活动关注学科领域:语言测试与评估
评分一直是语言测试领域的一个重要的研究课题,因为评分直接影响考试成绩的信度,而信度又是效度的基础。评分是评分人根据评分标准对考生表现打分的过程,因此,有关评分的研究要么针对评分人,要么针对评分标准。徐老师的这篇文章是一篇典型的针对评分人的写作评分研究,有助于我们了解评分研究的设计思路、方法和过程,可以给我们更多有关评分研究的启示。
本期活动讨论时间:6月2日-7月7日。用户可在阅读过程中向专家提问,讨论结束后将由专家总结点评。参与点评的用户可参加“线上论坛”,与专家、同行深入交流和互动。(温馨提示:只有回答了思考题,您才可以参加“线上论坛”哦!)本次线上论坛会采用微信群的方式,届时会在QQ群通知入群方式。
参与点评的用户请先加入我们的QQ群:
名称:iResearch学术交流二团
QQ号:174403624
验证信息请输入:读文献论坛
点评文献:评分经验对 CET4 作文评分人差异的影响研究
点评问题:
1. 作者是如何引出文章的研究问题的?
2. 作文文本是通过什么方法选取的?这种选择方法有什么优越性?
3. 作者是怎样对研究被试进行分类的?是用什么统计方法检验三组评分人评分次数差异性的?
4. 文中所给的研究的自变量和因变量各是哪些?这些变量分别是什么类型的变量?是针对哪个研究问题的变量?
5. 数据分析采用什么方法?为什么要用这些方法?
6. 作者是怎样回答第一个研究问题的?FACETS分析结果中哪些值可以体现评分人的内部一致性?哪些值可以体现评分人之间的一致性?logit值的大小如何对应评分的严厉程度?
7. 作者是如何回答第二个研究问题的?评分理由是通过什么方法量化的?MANOVA分析结果说明了什么问题?
8. 这篇文章的两个研究问题的内在联系是什么?评分标准表征对于提高评分信度有无帮助?
9. 研究结果对于大规模写作测试评分有哪些启示?