一种基于双流网络的人体动作识别方法及系统
2025-02-23 09:40
No.1343155613118767104
技术概要
PDF全文
本技术涉及一种基于双流网络的人体动作识别方法及系统,基于骨架信息分别提取无向时空图与RGB图像并分别使用GCN网络和CNN网络处理获得第一向量与第二向量分别代表空间时间特征与动作大小方向特征,从而获得较准确的人体动作类别识别效果,从提高骨骼信息数据的显性特征以及提高人体动作的识别率出发,在骨架信息的基础上提出基于GCN网络和CNN的双流网络,增强了骨架信息的表征,减少了骨骼信息噪声的影响,有效提高了人体动作的识别精度。
背景技术
现有的人体动作识别方法主要包括基于RGB的人体动作识别和基于骨架信息的人体动作识别两大类。其中,基于RGB视频基础上进行的人体动作识别应用较早,实现方法较为成熟,但普遍存在算法鲁棒性不理想、识别率不高的问题,同时人体动作识别受到RGB视频内动态背景、环境光线和遮挡等的多种影响,应用范围受到较大限制。 随着深度相机的普及应用以及RGB图像关键点检测算法的提出,现有技术已经可以较准确的提取获得人体骨架信息。骨架信息具有特征相对简单并且不受外界因素影响的特点,为人体动作识别提供了有效的支撑,有效提高了动作识别能力。常见的基于骨架信息的人体动作识别可以分为基于手工特征的人体动作识别、基于CNN的人体动作识别、基于RNN的人体动作识别以及基于GCN的人体动作识别。 但是,现有的基于骨架信息的人体动作识别普遍受到骨骼信息点噪声的影响,使人体动作识别的精度不够理想。进一步地,基于手工特征提取人体骨架信息特征计算比较繁琐,泛化能力太弱,不适合识别较为复杂的人体动作;基于RNN的动作识别可以较好的提取时间信息,但是对于空间信息提取较差,计算也较为复杂;基于CNN网络的动作识别对空间信息提取较好,但是对时间信息较为敏感。因此,现有的基于骨架信息的人体动作识别方法在实际应用中仍然存在诸多不便和限制。
实现思路
阅读余下40%
技术概要为部分技术内容,查看PDF获取完整资料
该技术已申请专利,如用于商业用途,请联系技术所有人!
技术研发人员:
肖文琛袁娟焦永利董志文
技术所属: 富盛科技股份有限公司.
相关技术
人脸识别装置 人脸识别装置
玉米果穗表型分析方法、装置及设备 玉米果穗表型分析方法、装置及设备
焊缝关键点识别方法、装置、设备、介质及程序产品 焊缝关键点识别方法、装置、设备、介质及程序产品
基于三维点云数据的辅助加工质量评估方法、介质及设备 基于三维点云数据的辅助加工质量评估方法、介质及设备
跨令牌引导Transformer的弱监督定位方法 跨令牌引导Transformer的弱监督定位方法
一种基于Mamba的遥感图像作物分类方法 一种基于Mamba的遥感图像作物分类方法
基于局部密度参数调整与强度优化的点云平滑拟合方法 基于局部密度参数调整与强度优化的点云平滑拟合方法
图像情感分析方法及装置、存储介质及电子设备 图像情感分析方法及装置、存储介质及电子设备
一种基于CLIP损失与感知损失的扩散模型LoRA微调优化方法及系统 一种基于CLIP损失与感知损失的扩散模型LoRA微调优化方法及系统
融合时空立方体各向异性的图结构生成方法及装置 融合时空立方体各向异性的图结构生成方法及装置
技术分类
电信、广播电视和卫星传输服务 电信、广播电视和卫星传输服务
互联网软件服务 互联网软件服务
集成电路设计 集成电路设计
信息集成数字服务 信息集成数字服务
电气机械制造 电气机械制造
计算机、通信、电子设备制造 计算机、通信、电子设备制造
医药制造、生物基材料 医药制造、生物基材料
石油煤矿化学用品加工 石油煤矿化学用品加工
化学原料制品加工 化学原料制品加工
非金属矿物加工 非金属矿物加工
金属制品加工 金属制品加工
专用设备制造 专用设备制造
通用设备制造 通用设备制造
通用零部件制造 通用零部件制造
汽车制造业 汽车制造业
铁路、船舶、航天设备制造 铁路、船舶、航天设备制造
电力、热力生产和供应 电力、热力生产和供应
燃气生产和供应 燃气生产和供应
水生产和供应 水生产和供应
房屋建筑、土木工程 房屋建筑、土木工程
交通运输、仓储和邮政 交通运输、仓储和邮政
农、林、牧、渔业 农、林、牧、渔业
采矿业 采矿业
农副、食品加工 农副、食品加工
烟草、酒水加工 烟草、酒水加工
纺织皮具居家制品 纺织皮具居家制品
文教体娱加工 文教体娱加工
苏ICP备18062519号-5 © 2018-2025 【123技术园】 版权所有,并保留所有权利