基于视频时空特征提取分类的动作分析评估模型

为拓展机器视觉技术在医工结合场景下的应用，文中基于改进的时空Transformer模型，提出一种动作规范识别模型。该模型由数据嵌入层、时空Transformer层、决策融合层组成。数据嵌入层利用Openpose模型从sRGB图像中提取人体骨骼数据，降低环境部署成本；时空Transformer层使用时空模块和块间模型对图像数据特征进行训练和分类，提升原模型的分类精度；决策融合层实现对应用场景的规范性判别。实验测试结果表明：所提算法的TOP1和TOP5精度指标在所有对比算法中均为最优；在以心肺复苏术为例进行的实际应用测试中，该算法的综合性能较为理想，能够满足工程需要。