手语识别方法、装置、电子设备及存储介质 · CN123016513A

著录项目

公开（公告）号CN123016513A	申请号CN202611131467.9	专利类型发明专利
状态在审	国家或地区CN	申请人珠海莫界科技有限公司
分类号G06V40/20(2022.01), G06V10/44(2022.01), G06F18/213(2023.01), G06F18/25(2023.01)	申请日2026-07-28	公开日2026-10-30
发布日期2026-10-30	文档 ID84661720667100006	源数据页码1608
专利语言zh

摘要

本申请实施例提供了一种手语识别方法、装置、电子设备及存储介质，该方法包括：获取用户在进行手语表达时采集到的视觉信号和肌电信号，从视觉信号中提取视觉特征，从肌电信号中提取肌电特征；将视觉特征与肌电特征在时间维度上对齐，根据对齐后的视觉特征生成视觉识别结果，根据对齐后的肌电特征生成肌电识别结果；根据视觉识别结果和肌电识别结果确定手语识别结果；根据手语识别结果输出手语文本和/或合成语音。本申请实施方式通过引入肌电信号辅助识别，避免了单一视觉模态在环境因素影响下，识别精度下降的问题，使手语识别在复杂环境下仍能保持良好的识别效果。

附图

附图 1