首页 | 本学科首页   官方微博 | 高级检索  
     

第二届中文抽象语义表示解析评测
作者姓名:李斌  许智星  肖力铭  周俊生  曲维光  薛念文
作者单位:1. 南京师范大学文学院;2. 北京大学中国语言文学系;3. 南京师范大学计算机与电子信息学院;4. 布兰迪斯大学计算机科学系
基金项目:国家社会科学基金(18BYY127);;国家自然科学基金(61772278);
摘    要:抽象语义表示是近年来国内外句子语义解析领域的研究热点,国际上已举办了CoNLL2019和CoNLL2020两届跨语言的评测。中文抽象语义表示评测是CoNLL2020的五大任务之一,取得了接近英语的解析效果,但是评测数据和评测指标仍有较大改进空间。为了推动中文抽象语义解析研究,该文在第二十一届中国计算语言学大会技术评测任务研讨会上组织了第二届评测,以新设计的Align-smatch指标为排名标准,采用改进的语义标注方案和标注语料库来进行评测。在基础测试集上,封闭模式的最高F1值为80.00%;盲测集上的表现则相比基础测试集下降了7个百分点左右。本次评测的最佳结果在MRP指标下比上届提高了2.66个百分点。统计发现,整体性能提升主要来源于概念之间的语义关系预测准确率的提高,而语义关系的对齐还有待提升。

关 键 词:抽象语义表示  语义解析  评测指标  中文信息处理
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号