深度学习在多模态情绪识别中的应用
2025-02-15 09:38
No.1340255945024086016
技术概要
PDF全文
本文介绍了一种基于深度学习的多模态情绪识别技术。该技术首先对不同模态数据进行预处理,然后利用密集交互神经网络对数据进行特征提取,形成特征矩阵。最后,通过情绪识别神经网络对特征矩阵进行分析,实现情绪识别。
背景技术
近年来,对于情绪识别问题,研究人员采用了各种各样的数据源进行识别,包括脑电,眼动追踪、面部表情及语言等信号。各种模态数据在构建情感模型中各有特点。其中,使用脑电信号构建情感模型,准确率高、稳定性好,已经得到国内外科研人员的广泛认可,并开展了深入的研究。但在实际应用中,采集脑电信号的过程繁琐且成本高。使用其他信号,如面部表情或语言对话等,采集便利,但区分能力弱容易伪装。使用多个模态数据融合的情绪识别研究正越来越得到关注。国际上不同实验室的研究结果表明,同时采集的不同模态的信号反映了情绪的不同侧面。因此,使用多模态数据融合的方法进行情绪识别,可以大大提高情绪识别系统的准确率。 目前,多模态数据融合的情绪识别方法,针对采用的各种模态的数据,设计了各式各样的多模态数据融合情绪识别模型。然而,尽管目前有很多种多模态数据融合的情绪识别神经网络模型,但大多模型的设计依赖于某个模态数据本身,无法变更为其他模态。此外,大多数模型的设计依赖于模态数量,无法根据实际情况增减模态数量。
实现思路
阅读余下40%
技术概要为部分技术内容,查看PDF获取完整资料
该技术已申请专利,如用于商业用途,请联系技术所有人!
技术研发人员:
吕宝粮赵志炜刘伟
技术所属: 上海零唯一思科技有限公司.
相关技术
一种智慧课堂考勤系统 一种智慧课堂考勤系统
基于大模型的SQL语句生成方法及装置 基于大模型的SQL语句生成方法及装置
基于自然语言处理的词云创作方法、装置、介质、产品 基于自然语言处理的词云创作方法、装置、介质、产品
一种基于雷达监测数据的鸟类异常行为识别方法 一种基于雷达监测数据的鸟类异常行为识别方法
一种三方数据信息平台非即时数据监控预警方法及系统 一种三方数据信息平台非即时数据监控预警方法及系统
一种基于多张量核心处理器的卷积计算数据重用方法 一种基于多张量核心处理器的卷积计算数据重用方法
文本识别方法及装置、计算机可读存储介质和电子设备 文本识别方法及装置、计算机可读存储介质和电子设备
一种基于AI大模型的电力设备的故障评估方法及系统 一种基于AI大模型的电力设备的故障评估方法及系统
信息生成方法、装置、电子设备和计算机可读介质 信息生成方法、装置、电子设备和计算机可读介质
自动化测试脚本管理方法、装置、计算机设备和存储介质 自动化测试脚本管理方法、装置、计算机设备和存储介质
技术分类
电信、广播电视和卫星传输服务 电信、广播电视和卫星传输服务
互联网软件服务 互联网软件服务
集成电路设计 集成电路设计
信息集成数字服务 信息集成数字服务
电气机械制造 电气机械制造
计算机、通信、电子设备制造 计算机、通信、电子设备制造
医药制造、生物基材料 医药制造、生物基材料
石油煤矿化学用品加工 石油煤矿化学用品加工
化学原料制品加工 化学原料制品加工
非金属矿物加工 非金属矿物加工
金属制品加工 金属制品加工
专用设备制造 专用设备制造
通用设备制造 通用设备制造
通用零部件制造 通用零部件制造
汽车制造业 汽车制造业
铁路、船舶、航天设备制造 铁路、船舶、航天设备制造
电力、热力生产和供应 电力、热力生产和供应
燃气生产和供应 燃气生产和供应
水生产和供应 水生产和供应
房屋建筑、土木工程 房屋建筑、土木工程
交通运输、仓储和邮政 交通运输、仓储和邮政
农、林、牧、渔业 农、林、牧、渔业
采矿业 采矿业
农副、食品加工 农副、食品加工
烟草、酒水加工 烟草、酒水加工
纺织皮具居家制品 纺织皮具居家制品
文教体娱加工 文教体娱加工
苏ICP备18062519号-5 © 2018-2025 【123技术园】 版权所有,并保留所有权利