摘要：为了检验TEM-4写作新的分项式评分标准的评分质量，18位评分员使用这种新的分项式评分标准独立评阅了35篇TEM-4真实作文文本。我们运用项目反映理论的多层面Rasch模型对评分结果进行分析。多层面Rasch模型总层面和分层面分析的结果表明，新的分项式评分标准能够有效地区分不同写作能力水平的受试；评分员的松严度虽然存在显著差异，但评分员之间的一致性和评分员内部的稳定性均在可以接受的范围之内；评分标准各维度的难度存在显著差异，分值的使用总体上令人满意；评分员与受试之间交互作用的偏差和评分员与评分标准维度之间交互作用存在一些显著偏差。整体而言，新标准评分结果与模型拟合比较理想，评分员使用该标准评分的结果是可靠的。

关键词：tem4写作测试 分项式评分标准 效度验证 多层面rasch模型 

单位：上海外国语大学博士后科研流动站 上海200083 南方医科大学外语学院 广东广州510515 宁波大学科技学院 浙江宁波315211