基于语言模型语料库（基于模板的论证诊断性评论的语料库）

对学习者的论证提供反馈是发展批判性思维技能的关键，但这需要大量的时间和精力。为了减轻教师的负担，我们的目标是使反馈过程自动化，特别是给予诊断性评论，指出论证中固有的缺陷。最好是给出具体的诊断性评论，这样学习者就能在没有误解的情况下认识到诊断。然而，提供具体诊断性评论的任务应该如何制定并不明显。我们提出了一个任务的表述，即模板选择和槽的填充，以使自动评估更容易，模型的行为更可操作。该表述的关键是创建一个足以满足实际使用的模板集的可能性。在本文中，我们定义了模板集应该满足的三个标准：表达性、信息性和唯一性，并验证了创建一个满足这些标准的模板集的可行性，作为第一次试验。我们将通过一项将文本中的诊断性评论转换为模板格式的注释研究来证明它是可行的。注释研究中使用的语料库是公开可用的。

《TYPIC: A Corpus of Template-Based Diagnostic Comments on Argumentation》

论文地址:http://arxiv.org/abs/2201.06674v1