一种基于多模态融合的室内场景结构化生成方法及系统

著录项目

摘要

本发明涉及室内场景重建技术领域，提供一种基于多模态融合的室内场景结构化生成方法及系统。首先，获取室内场景的多模态数据并提取特征，建立不同模态数据之间的空间对应关系及语义对齐关系。针对不同空间区域确定各模态数据的可靠性权重，并对多模态特征进行自适应融合。其次，根据融合特征确定场景中的对象及其参数化属性，构建结构化场景模型。最后，将模型中的对象与对应的多模态数据进行一致性评价以确定异常对象，并调整异常对象所在空间区域内各模态数据的可靠性权重，重新确定异常对象的参数化属性并更新结构化场景模型。本发明能够适应不同空间区域的模态数据质量差异，提高室内场景结构化生成的准确性和可靠性。

附图

附图 1