首页 | 本学科首页   官方微博 | 高级检索  
     

自适应语义感知网络的盲图像质量评价
引用本文:陈健,万佳泽,林丽,李佐勇.自适应语义感知网络的盲图像质量评价[J].中国图象图形学报,2023,28(11):3400-3414.
作者姓名:陈健  万佳泽  林丽  李佐勇
作者单位:福建理工大学电子电气与物理学院, 福州 350118;福建省信息处理与智能控制重点实验室(闽江学院), 福州 350121
基金项目:国家自然科学基金项目(61972187);福建省自然科学基金项目(2020J02024,2022J01952);福建省信息处理与智能控制重点实验室(闽江学院)开放课题项目(MJUKF-IPIC202110)
摘    要:目的 盲图像质量评价(blind image quality assessment,BIQA)在图像质量控制领域具有重要的实际意义。虽然目前针对自然失真图像的盲图像质量评价取得了合理的结果,但评价准确性仍有待进一步提升。方法 提出一种自适应语义感知网络(self-adaptive semantic awareness network,SSA-Net)的盲图像质量评价方法,通过理解失真图像的内容和感知图像失真的类型来提高预测的准确性。首先,利用深度卷积神经网络(deep convolutional neuralnetwork,DCNN)获取各个阶段的语义特征,并提出多头位置注意力(multi-head position attention,MPA)模块通过聚合特征图的长距离语义信息来加强对图像内容的理解。接着,提出基于多尺度内核的自适应特征感知(self-adaptivefeature awareness,SFA)模块感知图像的失真类型,并结合图像内容来捕获图像的全局失真和局部失真情况。最后,提出多级监督回归(multi-level supervision regression,MSR)网络通过利用低层次的语义特征辅助高层次的语义特征得到预测分数。结果 本文方法在7个数据库上与11种不同方法进行了比较,在LIVEC(LIVE in the Wild ImageQuality Challenge)、BID(blurred image database)、KonIQ-10k(Konstanz authentic image quality 10k database)和SPAQ(smartphone photography attribute and quality)4个自然失真图像数据库中的斯皮尔曼等级相关系数(Spearman rankorder correlation coefficient,SRCC)值分别为0.867、0.877、0.913和0.915,获得了所有方法中最好的性能结果。同时在两个人工失真图像数据库中获得了排名前2的SRCC值。实验结果表明,与其他先进方法相比,本文方法在自然失真图像质量评价数据库上的表现更为优异。结论 本文方法通过结合图像内容理解与不同失真类型感知,能更好地适应自然图像的失真,提高评价准确性。

关 键 词:图像质量评价(IQA)  盲图像质量评价(BIQA)  深度学习  自适应语义感知网络(SSA-Net)  多级监督回归(MSR)
收稿时间:2022/9/26 0:00:00
修稿时间:2023/1/19 0:00:00

Self-adaptive semantic awareness network for blind image quality assessment
Chen Jian,Wan Jiaze,Lin Li,Li Zuoyong.Self-adaptive semantic awareness network for blind image quality assessment[J].Journal of Image and Graphics,2023,28(11):3400-3414.
Authors:Chen Jian  Wan Jiaze  Lin Li  Li Zuoyong
Affiliation:School of Electronic, Electrical Engineering and Physics, Fujian University of Technology, Fuzhou 350118, China;Fujian Provincial Key Laboratory of Information Processing and Intelligent Control(Minjiang University), Fuzhou 350121, China
Abstract:
Keywords:
点击此处可从《中国图象图形学报》浏览原始摘要信息
点击此处可从《中国图象图形学报》下载免费的PDF全文
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号