自然语言处理评测中的问题与对策 |
| |
作者姓名: | 董青秀 穗志方 詹卫东 常宝宝 |
| |
作者单位: | 1.北京大学 计算语言学教育部重点实验室,北京 100871; 2.北京大学 信息科学技术学院,北京 100871; 3.北京大学 中文系,北京 100871 |
| |
基金项目: | 国家科技创新2030“新一代人工智能”重大项目(2020AAA0067067000);国家自然科学基金(U19A2065) |
| |
摘 要: | 自然语言处理中的评测任务引导和推动着技术、模型和方法上的研究.近年来,新的评测数据集和评测任务不断被提出,与此同时,现有评测暴露的一系列问题也限制了自然语言处理技术的进步.该文从自然语言处理评测的概念、构成、发展和意义出发,分类综述了主流自然语言处理评测的任务和特点,进而总结归纳了自然语言处理评测中的问题及其成因.最后...
|
关 键 词: | 自然语言处理评测 数据集偏差 评测指标 |
收稿时间: | 2020-12-14 |
|
| 点击此处可从《中文信息学报》浏览原始摘要信息 |
|
点击此处可从《中文信息学报》下载全文 |
|