基于Stixel world及特征融合的双目立体视觉行人检测

针对单目视觉行人检测无法获得深度信息从而导致冗余信息较多、检测效率和准确度存在局限性的问题,首先,在图像的预处理阶段提出了一种利用双目立体视觉产生的视差信息优化分析来简化复杂场景的动态规划棒状像素场景(stixel-world)表达方式;然后,在行人目标检测阶段,对传统HOG特征中block尺度进行分析、降维,采用Fisher准则筛选得到了适用于道路环境下的多尺度HOG(multi-HOG)特征,将Multi-HOG特征与LUV颜色通道特征进行融合,最后采用交叉核支持向量机(hikSVM)分类器对行人目标分类。实验结果表明,采用改进过后的Stixel-world算法用于图像预处理极大地减少了计算时间。缩小了行人检测的候选区域,基于特征融合和hik-SVM的目标检测算法在保证检测准确度的前提下,具有较好的实时性和鲁棒性。     

基于机器视觉的立铣刀磨损检测方法研究

针对传统立铣刀视觉检测流程中图像定位及利用圆弧拟合边缘不精确的问题,提出一种垂直分布的双镜头视觉检测方法,开发了一套加工中心立铣刀机器视觉检测系统。在自适应阈值分割及边缘检测算法的基础上,通过筛选及合并共线轮廓,拟合直线获取端面刀刃偏转角度,驱动电动机精确定位后采集铣刀侧面图像。基于立铣刀投影几何模型复原侧面轮廓,在侧面摄像头所获取的图像上拟合原轮廓曲线,结合区域求差算法计算出磨损参数及位置信息。实验表明,此检测方法可以精确拟合圆周刃轮廓,提取磨损缺陷区域,检测精度达到0.01 mm,实现了加工中心立铣刀在位检测。     

采用双目视觉测深建立物体的投影视图

介绍了用边缘检测提取平面图像的边缘，并利用射影几何原理的三维信息恢复方法．双目平行视觉进行测深，对像平面所反映的物体进行三维标定，然后利用透视不变量一交比对像进行变，得到物体在像平面的正投影视图。从基于图像的三维信息恢复的基本输入输出的问题入手，详细阐明了双目视觉模拟基于图像的三维深度信息恢复方法，并利用该方法恢复物体的正投影视图。     

基于仿复眼视觉成像的目标信息获取方法

目标信息获取是视觉测量的关键技术,提出了一种基于仿复眼视觉成像的目标三维信息获取方法.该方法根据复眼视觉成像原理,采用单摄像机和平面微透镜阵列进行成像,建立目标点和成像点之间的对应几何关系,利用归一化互相关窗口匹配算法,获得目标的深度信息,从而计算出其三维坐标信息,通过试验验证了该方法的可行性和正确性.     

钢拱架铰接孔视觉定位方法研究

针对钢拱架自动化拼接过程中需要对钢拱架铰接孔进行定位的实际问题,设计了一种基于双目视觉的钢拱架铰接孔定位方法。首先通过模板匹配对钢拱架铰接孔进行初定位,找到感兴趣区域;采用一种新的自适应阈值算法计算阈值,对感兴趣区域进行二值化处理;利用边缘检测和最小二乘法提取得到铰接孔椭圆轮廓特征;然后找到椭圆轮廓上特殊的两条弦,根据空间几何关系,计算空间圆平面的法向量;利用消影线和椭圆参数矩阵,计算铰接孔圆心在图像上的实际投影点;最后基于双目视觉成像模型计算铰接孔圆心的精确空间坐标。实验证明,本方法可实现钢拱架铰接孔高精度定位,满足实际工业需求,为钢拱架自动化拼接提供技术支撑。     

篦冷机熟料的立体视觉在线测量

实现篦冷机内部冷却风的合理分配,需要实时获得水泥熟料的厚度信息。针对篦冷机内温度高,难以实时测量的问题,提出了基于网格候选点的立体视觉在线测量方法。用相交光轴的两台摄像机组成双目立体视觉系统获取料层图像,在世界坐标系内建立代表深度信息的网格候选点用于深度测量。利用小波多分辨率算法快速筛选候选点,满足传送中熟料在线测量的实时性需求。引入了可信系数的概念,对容易出现歧义的少数候选点根据直方图分布判断该窗口内图像是否包含丰富的纹理信息,选择较大或较小的匹配窗口用于二次匹配,减少了匹配歧义带来的测量误差。实验结果表明,测量系统的均方根误差为4.29mm,能够满足实时厚度测量的精度要求。提出的方法测量精度高、计算速度快,能够稳定用于篦冷机内熟料厚度的在线测量。     

基于双目视觉的目标定位系统设计

基于双目视觉原理进行目标定位可以得到目标的深度信息。本文对双目视觉关键技术中的摄像机标定和立体匹配进行深入研究,采用改进的平面标定法和基于外极线约束和灰度相关性的立体匹配算法。搭建双目视觉系统实验平台,编制目标定位程序。实验结果验证本文方法的准确性。     

基于双目视觉的运动目标检测跟踪与定位

为克服传统目标检测跟踪方法无法对目标准确定位,以及在复杂环境下容易受光照、阴影等因素干扰的问题,提出了基于双目视觉的目标检测跟踪与定位方法。首先使用Matlab标定工具箱和OpenCV进行摄像机标定和图像校正,然后利用基于双目视觉的背景差分法实现目标检测,结合基于Kalman滤波的改进Camshift算法实现目标跟踪,最后利用视差图得到目标三维信息,从而实现目标定位。实验结果表明,所提方法能够实时跟踪运动目标并实现目标的准确定位。     

爬壁机器人双目视觉障碍检测系统

针对壁面障碍物的不确定性,设计了一种爬壁机器人双目视觉障碍检测系统。具体包括搭建双目平行视觉系统,根据双目视觉理论对摄像机进行标定,获取相机标定参数;通过标定参数和极线约束对双目图像进行校正,解决图像畸变不共面问题;利用块搜索模型和相似度函数获取视差,保证视差获取的快速性与鲁棒性;最后提出一种障碍物检测算法:建立壁面检测模型约束检测范围,引入面积阈值,过滤干扰并实现障碍物提取,提出一种障碍物定位算法,通过宽度、深度与偏距三个方面对障碍物进行定位,同时,通过线性插值解决障碍物中心视差丢失问题。实验结果表明:在保证实时性的基础上,该系统能够有效检测前方障碍物且准确提取率能够达到95.9%,定位误差为4.91%,满足爬壁机器人检测要求。     

可见光通信与双目视觉的室内定位

提出一种基于可见光通信与双目视觉测量的高精度室内定位方法,旨在为室内移动机器人提供一种精度高、成本低、不易受干扰的室内定位方案。该方法利用双目视觉传感器对LED光源进行成像测量,利用惯性测量单元传感器记录成像测量的三维姿态角,并通过可见光通信技术获取LED光源的坐标信息,最终计算双目视觉传感器相对于LED光源的三维坐标。根据该方法研制了一款基于可见光通信与成像的定位模块,该模块可以利用单个或两个LED光源进行成像定位。当定位模块采用1280×720分辨率的图像时,在2 m×2 m×3 m室内环境中可实现厘米级移动定位,定位频率大于5 Hz;当利用两个相距60 cm的LED光源进行定位时,在三维方向上的定位误差均小于5 cm,同时能够提供小于1.4°的定向纠正。该方法可以为室内移动机器人提供厘米级定位导航服务。     

智能车行人识别的灰度形态学边缘检测研究

行人轮廓特征是行人识别的重要特征,为了获取更好的行人轮廓,边缘检测方法是一个非常重要的选择。首先采用Roberts算子、Prewitt算子、Soberl算子、LOG和Canny算子对行人图像进行边缘检测,得出能获得较好行人轮廓的边缘检测方法;然后用此边缘检测方法结合灰度形态学进行图像处理,最终获得具有最优行人轮廓的形态学边缘检测方法。试验结果显示,此方法能很好地消除行人轮廓的干扰因子。     

无人车鱼眼双目深度提取研究

对无人车鱼眼双目环境感知系统模型进行了研究,分析了鱼眼双目模型与针孔双目模型的转化关系。针对鱼眼图像变形大的特点,提出了一种用于鱼眼相机图像矫正的余弦相似方法插值算法,算法采用余弦相似方法衡量待插值点与周围灰度已知点的相似性,对因重投影产生的像素缺失进行了有效插值。最后,通过场景深度提取试验对该模型和算法进行了试验验证。研究结果表明,与传统双目模型相比,鱼眼双目模型能够获得更大范围的深度信息;对于鱼眼双目模型中的插值,所提出算法能更好地处理插值细节,从而更加有效地提取场景的深度信息。     

基于 Stereo RCNN 的锚引导 3D 目标检测算法

针对当前基于锚的双目 3D 目标检测算法存在的锚点数量选取较多,从而影响在线计算速度的问题,提出了一种基于 Stereo RCNN 的锚引导 3D 目标检测算法 FGAS RCNN。 在第 1 阶段中,输入左右图像分别生成相应的概率图以生成稀疏锚点及 稀疏锚框,再通过将左右锚作为一个整体生成 2D 预选框。 第 2 阶段的关键点生成网络利用稀疏锚点信息生成关键点热图,并 结合立体回归器融合生成 3D 预选框。 针对原始图像在卷积后会出现像素级信息丢失的问题,通过 Mask Branch 生成的实例分 割掩模结合实例级视差估计进行像素级优化。 实验表明,在没有任何深度和位置先验信息输入的情况下,此方法依旧可以在减 少计算量的同时保持较高的召回率。 具体来说,此方法在以 0. 7 为阈值的 3D 目标检测上平均精度为 44. 07% 。 相比于 Stereo RCNN,本文方法在平均精度上提高了 4. 5% 。 与此同时,此方法的整体运行时间较 Stereo RCNN 缩短了 0. 09 s。     

Contour extraction of a laser stripe located on a microscope image from a stereo light microscope

A stereo light microscope has a special optical structure that consists of two optical paths. With two cameras fitted on its imaging planes, a microscopic binocular vision system can be constructed, and this system can be applied in three‐dimensional (3D) shape measurements of a microscopic object. A novel‐shape reconstruction system is developed in this article composed of laser fringe scanning and a stereo light microscope. A laser projector emits a thin light sheet and projects it onto the microscopic object's surface. The microscopic object is placed on a micro‐displacement mechanism and moved in a given direction. The entire surface of the object is scanned by the light sheet. This system captures a series of microscopic images of the laser stripe, which are used to restore the 3D shape of the object. In this article, we mainly focus on the study of the laser stripe detection method, which is derived based on the Canny rule. First, the Canny rule outputs pixels at the left and right edges of the laser stripe. Then, a subpixel edge extraction method is proposed based on polynomial fitting that outputs the center curve of the laser stripe. Finally, an edge filter is used to smooth the edge burrs, and the Hermite interpolation method is used to link the broken edges and construct continuous, smoothing edge contours. The results show that this method can effectively find the subpixel position of the laser stripe and output high‐quality edge contours. The method is suitable for extracting the contours of a laser stripe located in a microscope image.     

基于地磁序列匹配的大型室内动态定位方法

基于地磁信号的定位技术无需架设信号发送设备,成本低且可覆盖室内定位范围广。针对室内地磁定位方法采集工作繁琐复杂需反复测量才能精准映射二维平面坐标点的现状,提出一种基于移动终端图像可视化映射和自动插入采集数据的方法,快速采集室内地磁指纹,动态建立匹配室内二维地图的指纹数据库。在此基础上,定位阶段使用改进的动态时间规整(DTW)算法进行地磁序列匹配,提高大型数据库的动态定位效率。后续采用粒子滤波算法融合地磁序列定位和行人航位推算(PDR)的结果,在智能移动终端载体上实现快速精准定位。实验结果表明该动态定位方法在大型室内区域的动态实时跟踪定位效率为每步65 ms,平均定位精度为1.4 m以内。     

基于AdaBoost行人检测优化算法的研究

针对车辆辅助安全驾驶系统的道路行人检测和识别问题,对行人检测算法的实时性和检测准确性受光照影响等方面进行了研究。对行人检测识别算法进行了归纳,将在线训练和更新行人分类器技术应用到车辆前方行人检测和识别中。提出了改进的AdaBoost行人检测优化算法,应用该算法行人识别分类器训练时,根据正样本和负样本的错分率,实时调整级联分类器权重系数,在线更新分类器的错误率权重,在保证分类器整体准确率的前提下,降低了分类器的级数,优化了分类器结构,减少了计算的复杂性;采用扩展的类Haar特征,降低了算法对光线的敏感性,提高了环境适应能力。试验结果表明:在相同的检测率下,改进的AdaBoost算法需要的检测时间更少,系统具有更高的鲁棒性,可以满足道路行人识别的要求。     

[产品服务]“内容-交互”双维度产品信息处理方法及应用

针对当前的产品信息处理方式在内容广度和交互深度上的局限，提出了“内容-交互”双维度信息处理方法。对产品信息内容和组织社群化进行分析，讨论了信息处理平台的功能与架构。以某汽车空气滤清器项目的开发过程为例，描述了该过程中产品信息处理的应用场景。研究表明，该方法有助于改善产品信息的表达并提高参与人员之间的交互。     

基于傅里叶分解方法的航空发动机转子故障诊断

针对传统时频分析法无法提取转子故障特征信息的问题,提出了基于傅里叶分解方法(FDM)的转子碰摩故障诊断方法。构造了调频调幅仿真信号,对比FDM、集合经验模态分解(EEMD)、变分模态分解(VMD)的分解结果发现,FDM能够实现仿真信号的完备性分解,且时频分辨率高。利用FDM对采集到的转子试验器机匣单点-转子全周碰摩试验故障数据进行诊断,不同算法故障信号分解结果的周期功率谱密度估计和故障特征提取结果表明,该方法具有更高的诊断可靠性,可有效地解决转子故障诊断问题。