需要我帮你解读这件专利吗?
公开(公告)号CN122904201A | 申请号CN202611229721.9 | 专利类型发明专利 |
状态在审 | 国家或地区CN | 申请人新译信息科技(北京)有限公司 |
分类号G06F18/25(2023.01), G06F18/213(2023.01), G06F18/21(2023.01), G06N3/0464(2023.01), G06N3/048(2023.01) | 申请日2026-08-13 | 公开日2026-10-13 |
发布日期2026-10-13 | 文档 ID84538528932600000 | 源数据页码57 |
专利语言zh | ||
本发明公开了一种多模态数据语义融合方法、系统及装置,首先,同时提取模态独立与跨模态公共特征,以公共特征为查询、独立特征为键值进行交叉注意力,抑制噪声,输出含公共语义与私有信息的增强特征,实现精细对齐;接着,堆叠特征为矩阵构建多模态图,每层图卷积后动态更新邻接矩阵,并利用多头图注意力学习间依赖,经2层传播输出语义丰富的图增强特征;最后,从清晰度、完整性、一致性评估模态质量,得分平均后经温度softmax得权重,低质量模态权重置零,加权融合实现鲁棒融合。
附图 1