首页 | 本学科首页   官方微博 | 高级检索  
     

自注意力机制的短文本分类方法
引用本文:陈立潮,秦杰,陆望东,潘理虎,张睿. 自注意力机制的短文本分类方法[J]. 计算机工程与设计, 2022, 43(3): 728-734. DOI: 10.16208/j.issn1000-7024.2022.03.018
作者姓名:陈立潮  秦杰  陆望东  潘理虎  张睿
作者单位:太原科技大学计算机科学与技术学院,山西太原030024,太原政通云科技有限公司,山西太原030000
基金项目:山西省自然科学基金项目(201901D111258);;山西省应用基础研究基金项目(201801D221179);
摘    要:针对短文本信息量少导致隐藏的信息难以充分挖掘和深度学习模型易受干扰导致分类准确度下降的问题,提出一种融合对抗训练自注意力多层双向长短期记忆网络(Con-Att-BiLSTMs)短文本分类模型.将文本训练集按不同比例进行分类对抗训练,通过对抗训练提升模型的健壮性;利用多层双向长短期记忆网络对语义进行提取,利用自注意力机制...

关 键 词:深度学习  自注意力机制  短文本分类  对抗训练  多层双向长短期记忆网络

Short text classification method based on self-attention mechanism
CHEN Li-chao,QIN Jie,LU Wang-dong,PAN Li-hu,ZHANG Rui. Short text classification method based on self-attention mechanism[J]. Computer Engineering and Design, 2022, 43(3): 728-734. DOI: 10.16208/j.issn1000-7024.2022.03.018
Authors:CHEN Li-chao  QIN Jie  LU Wang-dong  PAN Li-hu  ZHANG Rui
Abstract:
Keywords:
本文献已被 万方数据 等数据库收录!
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号