机构名称：
¥ 1.0
摘要：本研究探讨了使用人工智能（AI）语言模型Chatgpt作为自动论文评分（AES）工具（AES）工具的有效性，以将英语作为外语（EFL）学习者的论文进行评分。该语料库由50篇论文组成，代表各种类型，包括分析，比较和对比，描述性，叙述和意见论文，由10个EFL学习者在B2级别撰写。人类评估者和Chatgpt（4o Mini版本）使用国际英语语言测试系统（IELTS）任务2写作乐队描述符得分。采用定量方法，使用Wilcoxon签名的秩检验和Spearman相关测试来比较产生的分数，这两种得分方法之间存在显着差异，而人类评估者分配了比Chatgpt更高的分数。同样，各种类型的论文中的每一种都显而易见，与不同程度的显着差异也很明显，这表明论文的流派不是影响人类评估者与Chatgpt之间一致性的参数。毕竟，讨论的是，尽管Chatgpt表现出作为AES工具的承诺，但观察到的差异表明它尚未达到足够的实际使用水平。这项研究强调了在AI语言模型中需要改进的必要性，以满足EFL环境中论文评估的细微差别。
人工智能作为自动论文评分工具
主要关键词
相关文件推荐
