买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉合肥综合性国家科学中心能源研究院(安徽省能源实验室)申请的专利一种基于多模态融合的混合现实智能巡检方法及系统获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN120579148B 。

龙图腾网通过国家知识产权局官网在2025-12-16发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202511072835.2，技术领域涉及：G06F18/25；该发明授权一种基于多模态融合的混合现实智能巡检方法及系统是由刘少清;刘心怡;卢棚;梁立振设计研发完成，并于2025-08-01向国家知识产权局提交的专利申请。

本一种基于多模态融合的混合现实智能巡检方法及系统在说明书摘要公布了：本发明涉及混合现实与人工智能融合应用技术领域，尤其涉及一种基于多模态融合的混合现实智能巡检方法及系统。其技术方案包括以下步骤：通过混合现实设备同步采集用户视野图像与语音流数据；采用改进的YOLOv10模型对所述视野图像进行目标检测，输出候选目标区域及其置信度分数；通过Whisper语音识别模型转写语音输入，并利用BERT语义嵌入模型生成语义向量。本发明通过融合图像、语音与空间注视信息的多模态协同感知机制，结合上下文语义优化与轻量化终端部署，在复杂工业巡检场景中实现高精度、实时性、强鲁棒性的智能目标识别与自然交互。

本发明授权一种基于多模态融合的混合现实智能巡检方法及系统在权利要求书中公布了：1.一种基于多模态融合的混合现实智能巡检方法，其特征在于，包括以下步骤： S1、通过混合现实设备同步采集用户视野图像与语音流数据； S2、采用改进的YOLOv10模型对所述视野图像进行目标检测，输出候选目标区域及其置信度分数； S3、通过Whisper语音识别模型转写语音输入，并利用BERT语义嵌入模型生成语义向量，将其与候选目标的先验语义向量进行匹配； S4、基于混合现实设备提供的IMU信息与深度图像，计算用户注视方向向量，并与候选目标中心方向向量计算空间方向一致性； S5、结合多轮语音输入构建上下文语义记忆，通过注意力机制对语义匹配过程加权优化； S6、通过多模态融合函数计算候选目标的最终评分；步骤S6中，最终评分公式为： 其中，为通过多模态融合函数计算得到的候选目标的最终评分，、、为融合评分决策中使用的权重系数，为通过用户注视方向向量与候选目标中心方向向量计算得到的空间方向一致性分数，为通过当前语音语义向量与候选目标的先验语义向量匹配得到的语义匹配分数； S7、根据融合评分结果在混合现实界面高亮展示目标，并触发语音反馈完成智能巡检交互闭环。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人合肥综合性国家科学中心能源研究院(安徽省能源实验室)，其通讯地址为：230001 安徽省合肥市庐阳区三国城路80号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。