SemEval

touché23-valueeval数据集用于识别参数背后的人类价值

摘要虽然人类价值观在使论据有说服力中起着至关重要的作用，但我们目前缺乏必要的广泛数据集来开发大规模分析这些论点的价值的方法。为了解决此差距，我们介绍了Touché23-ValueEval数据集，这是Webis-Argvalues-22数据集的扩展。我们收集并注释了另外的4 780个新参数，将数据集的大小加倍至9 324个参数。这些论点来自六个不同的来源，涵盖了宗教文本，社区讨论，自由文本论点，报纸社论和政治辩论。按照原始数据集中建立的方法，由三名人群工人注释了每个参数，以提供54个人类价值观。touché23-valueeval数据集用于Semeval 2023任务4。ValueVal：识别参数背后的人类价值观，其中变压器模型的合奏表现出最新的性能。此外，我们的实验表明，一个微调的大语言模型Llama-2-7b可以取得可比的结果。