激光与红外

作者：欧阳楠楠

单位：1.中北大学计算机科学与技术学院,山西 太原 030051；2.机器视觉与虚拟现实山西省重点实验室,山西 太原 030051；3.山西省视觉信息处理及智能机器人工程研究中心,山西 太原 030051；

关键词：红外视频;注意力;关节点;行为识别

基金：国家自然科学基金项目(No.62272426；No.62106238)；山西省科技重大专项计划“揭榜挂帅”项目(No.202201150401021)；山西省科技成果转化引导专项项目(No.202104021301055)；山西省回国留学人员科研资助项目(No.2020-113)；山西省基础研究计划(No.202203021222027)资助。

针对红外视频缺少纹理细节特征以致在人体行为识别中难以兼顾计算复杂度与识别准确率的问题,提出一种基于全局双线性注意力的红外视频行为识别方法。为高效计算红外视频中的人体行为,设计基于两级检测网络的关节点提取模块来获得人体关节点信息,创新性地将所形成的关节点三维热图作为红外视频人体行为识别网络的输入特征；为了在轻量化计算的基础上进一步提升识别准确率,提出一种全局双线性注意力的三维卷积网络,从空间和通道两个维度提升注意力的建模能力,捕获全局结构信息。在InfAR和IITR IAR数据集上的实验结果表明,该方法在红外视频行为识别中的有效性。

来源：2024年第3期

《激光与红外》期刊编辑部

查看激光与红外杂志2024年第3期