手语是听障群体具备独立语法、高度复杂性的视觉空间语言体系。可穿戴传感接口凭借其不受视距限制、低功耗及强环境普适性等优势,为全天候手语识别提供了一种极具潜力的替代范式,主要传感模态包括:
- 柔性表皮电子:以表皮离子传感器和碳纳米管应变传感器为代表,能以极高的共形性附着于人体表面,捕捉手指的细微弯曲形变。
- 惯性与肌电混合传感:IMU 用于捕捉手腕及手臂在三维空间中的宏观运动学轨迹;sEMG 则深入解析驱动手部动作的底层肌肉激活模式。商用消费级 MYO 臂环的问世极大推动了低成本肌电手势识别技术的开源与普及。
- 多模态信息融合:Chen 等人构建了融合多通道 sEMG 与三轴加速度计的经典手语识别框架,创新性地将复杂手语解耦为手型(Handshape)、朝向(Orientation)、旋转(Rotation)和轨迹(Trajectory)四个正交的运动学基元。