本技术属于计算机视觉技术,介绍了一种结合多特征融合和多任务学习的单侧面瘫评估方法、系统、介质及设备。该方法涉及对采集的正面人脸特定表情动作视频进行预处理,以实现对单侧面瘫的多分支评估。
背景技术
单侧周围性面瘫(UPFP)是一种由于面神经核以及一侧的下游神经损伤引起的面部功能障碍,通常表现为受累侧的闭目、皱眉、鼓腮、示齿及闭唇无力、口角向对侧歪斜等,严重影响患者的功能、外观和心理健康。目前针对面瘫的临床诊断主要依赖于医生的主观判断。患者被指示进行特定的面部动作如扬眉、闭眼、鼓腮和示齿,然后医生根据从这些动作中观察到的不对称状态对面瘫的严重程度进行分级。
与临床方法相比,计算机辅助方法通常通过提供更客观和有效的评估来提供有前景的替代方案。随着深度学习的进步,相关技术手段在医学图像分析领域中也得到了广泛的应用,如医学图像分割、计算机辅助诊断和检测等。在面瘫检测领域,许多研究者利用深度学习方法来自动进行面瘫检测与面瘫等级评估。与传统方法相比,基于深度学习的检测方法显示出更高的准确率与效率,为临床从业者提供了宝贵的支持。
现有基于深度学习的面瘫检测与分级方法通常可分为三类,基于特征点坐标差异、基于静态图像对称差异或基于动态表情变化差异。现有的基于动态视频的面瘫检测算法在面瘫分级检测上都取得了显著进展,然而这些方法都仅采用了单一特征、未考虑多种特征的融合利用,且仅针对单侧面瘫整体性能进行综合评级评估。在口腔颌面头颈外科领域,单侧周围性面瘫通常涉及面神经的一或多个单侧外周支损伤,对单侧面神经整体功能的评估无法准确反映单个分支的损伤和恢复情况,目前尚没有能够分别针对面部不同面神经分支进行多级评估的自动检测方法。
综合上述分析,研究能有效融合利用多种特征、能针对不同面神经分支的单侧面瘫多级评估方法,非常具有医学临床价值与社会效益。因此,亟需一种新的单侧面瘫程度评估算法以应对当前迫切的临床需求,并进一步提升分级准确度。
实现思路