基于图像分割网络的深度假脸视频篡改检测

随着深度学习技术的快速发展,利用深度神经网络模型伪造出的深度假脸(deepfake)视频越来越逼真,假脸视频造成的威胁也越来越大。文献中已出现一些基于卷积神经网络的换脸视频检测算法,他们在库内获得较好的检测效果,但跨库检测性能急剧下降,存在泛化能力不足的问题。该文从假脸篡改的机制出发,将视频换脸视为特殊的拼接篡改问题,利用流行的神经分割网络首先预测篡改区域,得到预测掩膜概率图,去噪并二值化,然后根据换脸主要发生在人脸区域的前提,提出一种计算人脸交并比的新方法,并进一步根据换脸处理的先验知识改进人脸交并比的计算,将其作为篡改检测的分类准则。所提出方法分别在3个不同的基础分割网络上实现,并在TIMIT, FaceForensics++, FFW数据库上进行了实验,与文献中流行的同类方法相比,在保持库内检测的高准确率同时,跨库检测的平均错误率显著下降。在近期发布的合成质量较高的DFD数据库上也获得了很好的检测性能,充分证明了所提出方法的有效性和通用性。     

基于图像分割网络的深度假脸视频篡改检测

随着深度学习技术的快速发展,利用深度神经网络模型伪造出的深度假脸(deepfake)视频越来越逼真,假脸视频造成的威胁也越来越大.文献中已出现一些基于卷积神经网络的换脸视频检测算法,他们在库内获得较好的检测效果,但跨库检测性能急剧下降,存在泛化能力不足的问题.该文从假脸篡改的机制出发,将视频换脸视为特殊的拼接篡改问题,利用流行的神经分割网络首先预测篡改区域,得到预测掩膜概率图,去噪并二值化,然后根据换脸主要发生在人脸区域的前提,提出一种计算人脸交并比的新方法,并进一步根据换脸处理的先验知识改进人脸交并比的计算,将其作为篡改检测的分类准则.所提出方法分别在3个不同的基础分割网络上实现,并在TIMIT,FaceForensics++,FFW数据库上进行了实验,与文献中流行的同类方法相比,在保持库内检测的高准确率同时,跨库检测的平均错误率显著下降.在近期发布的合成质量较高的DFD数据库上也获得了很好的检测性能,充分证明了所提出方法的有效性和通用性.     

基于深度信息的弱光条件下人脸检测

为了解决弱光环境下人脸检测问题,研究基于深度信息的人脸快速定位方法。首先,使用2D Chamfer Match方法实现人脸的快速预定位,并对定位人脸进行区域增长和增强运算;然后,使用AdaBoost算法结合扩展的Harr特征训练出弱光条件下人脸检测的强分类器,以实现准确的人脸定位。实验表明,在弱光条件下,基于深度信息实现人脸定位和过滤,可以减小搜索范围,加快检测速度,具有较强的鲁棒性和时效性。     

视频目标运动分析研究

首先分析了OpenCV中BlobTrack运动模块的跟踪算法流程,接着对帧间差分、背景差分、多帧累加和光流法等常见的运动目标检测方法进行了比较,并提出了采用差异累计图像法对运动目标进行检测,然后重点分析了MeanShift算法原理,最后指出了采用BlobTrack跟踪时各个参数选取的问题,并通过Matlab仿真证明了BlobTrack在智能视频监控系统中的适用性。     

IC检测的图像预处理及芯片定位

全自动上芯机是用于芯片生产后工序的关键设备之一,机器视觉伺服系统是提高该设备产能和质量的关键系统,而图像预处理和芯片定位是其机器视觉的关键技术之一。为了消除采集图像与真实图像之问的差异,实现芯片精确定位,采用中值滤波算法和直方图算法实现图像的去噪和增强,并分析了图像相似性测量算法实现快速模板匹配。实验结果证明了算法的有效性和可靠性,为进一步提高芯片缺陷检测的精度提供了保障．     

全自动上芯机的晶片检测系统

全自动上芯机是用于芯片生产后工序的关键设备之一,IC检测系统是其核心技术。晶片检测系统主要构件包括光源,CCD,图像采集卡等硬件设施,以及专用的芯片处理检测算法。文章详细介绍了基于图像处理的晶片专用检测系统的搭建,分析了图像检测要求,提出了相应的检测算法。系统地完成图像采集、图像预处理、芯片定位、芯片检测等多个功能。     

基于投影法和同态滤波的多模板匹配算法

半导体封装图像处理中,环境光照的变化对视频设备截取的图像影响较大.为了减少光照的影响,提出了一种基于投影法和空域同态滤波的多模版算法,该算法首先利用投影法粗略确定芯片的位置并截取包含芯片的图像,接着应用空域变换对截取图像进行同态滤波,削弱了光照变化对图像产生的影响.最后利用模板库中的模板进行传统的模板匹配并更新模板库.实验证明该算法对光照具有很强的自适应性,具有良好的应用前景.