|
标题:基于毫米波雷达点云的骨架序列行为识别研究 作者:王伯伦 张远 乔一雪;吴冶 作者单位:北方工业大学信息学院,北京 100144;英特尔智能边缘计算联合研究院,江苏 南京 211100 关键字:行为识别;骨架序列;注意力机制;点云特征提取 摘要:人体行为识别,即理解和识别不同的人类行为。近年来,骨架序列数据在这一领域的应用十分热门。传统方法通过对视频数据进行人体姿态估计,提取骨架序列并利用神经网络完成识别。然而,视频数据的获取涉及隐私问题。为此,提出一种使用毫米波雷达获取点云数据,并从中提取特征,替代视频数据中的骨架序列进行行为识别的方法。提出运用点云学习方法实现骨架序列的替代输入,并将其与时空图卷积网络相结合,构建了全新的人体行为识别框架。该框架将点云分类问题转化为基于骨架的行为识别任务。与其他行为识别网络相比,该网络基于毫米波雷达实现,不会出现隐私泄露问题且经济适用性强,改进后的网络不仅能够捕捉点云数据的空间信息,点云数据中的局部上下文信息也被应用于相关分析和处理。为了验证网络的有效性,将其与基于点云的行为识别任务进行了比较,并在公开的数据集上进行了测试。 |