本技术方案涉及一种家庭环境中应用的气血健康评估技术及其配套设备,通过综合面部图像、舌象图像和rPPG波形特征,实现多模态数据融合,为用户提供全面的气血状态评估。
背景技术
气血既是构成人体的最基本物质,也是维持人体生命活动的物质基础。气血状态是人体健康状态辨识中的重要指标之一。望诊是中医四诊中的首要诊断方法,包括面诊和舌诊。根据《中医诊断学》的指出,面部血脉丰富、皮肤薄嫩,因此体内气血盛衰等变化最容易通过面部色泽变化表现出来。同时,舌象也被视为直接反映脏腑气血变化的另一关键途径,为医生提供了深入了解患者气血状况的重要信息。
由于当前气血状态辨识结果较多通过医生望闻问切得出,其判别结果具有较大的主观性,且医院等地受环境限制,无法持续动态的监测患者气血状态。因此,基于居家健康监测数据,在家庭场景下对患者进行持续动态的气血状态辨识具有重要意义。
中国发明专利(CN117423041B)公开了一种基于计算机视觉的面部视频判别中医气血系统,该系统包括视频采集模块、视频预处理模块、特征提取模块、气血辨识模块和模型升级模块;视频采集模块采集受试者面部视频;视频预处理模块将视频裁剪为视频帧;特征提取模块基于Transformer构建气血特征提取模型,使用多头注意力机制、3D卷积等深度神经网络提取所述视频帧的气血特征;气血辨识模块获取最终辨识结果,并通过多任务学习提升模型表现;模型升级模块通过提高模型对难以分类样本的关注度,实现模型闭环优化。但是该申请的技术方案基于面部视频,一方面辨识算法特征提取维度单一,识别准确率上限较低,另一方面其对视频拍摄环境和设备要求较高,难以直接运用于家庭场景下。
实现思路