工业云制造(四川)创新中心有限公司陈琳获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉工业云制造(四川)创新中心有限公司申请的专利一种基于多模态大模型的动态场景识别与AR信息叠加方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN120408282B 。
龙图腾网通过国家知识产权局官网在2025-09-26发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202510905966.8,技术领域涉及:G06F18/24;该发明授权一种基于多模态大模型的动态场景识别与AR信息叠加方法是由陈琳;郭悦;闻方平;陈伟;钱娓娓;曹永昌;叶盛设计研发完成,并于2025-07-02向国家知识产权局提交的专利申请。
本一种基于多模态大模型的动态场景识别与AR信息叠加方法在说明书摘要公布了:本发明涉及人工智能技术领域,公开了一种基于多模态大模型的动态场景识别与AR信息叠加方法,通过考虑每个子任务执行人员的任务执行操作速度和协作设备候选集中每个协作设备部署的多模态大模型库与硬件资源,构建以通信延时与硬件资源的约束条件集和协作设备运算负荷的优化目标,采用优化算法求解工业协作执行策略,驱使每个子任务执行人员配置对应的协作设备执行分配到的工业协作子任务。由此,本发明采用灵活分配调度部署有不同多模态大模型库的协作设备,利用目标协作设备与关联协作设备之间建立的通信链路,将每个工业协作子任务的数据处理动作交由对应多模态大模型的协作设备进行处理,提升了增强现实工业辅助系统的稳定性与实时性。
本发明授权一种基于多模态大模型的动态场景识别与AR信息叠加方法在权利要求书中公布了:1.一种基于多模态大模型的动态场景识别与AR信息叠加方法,其特征在于,所述方法包括以下步骤: 获取目标工业场景的工业协作任务,提取所述工业协作任务的协作任务执行内容和协作任务执行时段; 根据所述协作任务执行内容和协作任务执行时段,分解所述工业协作任务,生成工业协作子任务列表;其中,所述工业协作子任务列表存储有具有映射关系的若干个工业协作子任务和若干个子任务特征集; 基于每个工业协作子任务对应子任务特征集中的任务执行操作特征和任务执行时间特征,匹配每个工业协作子任务的子任务执行人员和协作设备候选集,考虑每个子任务执行人员的任务执行操作速度和协作设备候选集中每个协作设备部署的多模态大模型库与硬件资源,生成工业协作执行策略; 其中,考虑每个子任务执行人员的任务执行操作速度和协作设备候选集中每个协作设备部署的多模态大模型库与硬件资源,生成工业协作执行策略步骤,具体包括: 访问历史工业协作任务数据库,提取出每个子任务执行人员的历史工业协作任务的执行信息,预估每个子任务执行人员在执行工业协作任务对应的工业协作子任务的若干个操作步骤的操作时长;查询协作设备候选集中每个协作设备部署的多模态大模型库与硬件资源;其中,所述多模态大模型库存储有不同操作领域下的若干个多模态场景识别与任务执行指导大模型,所述硬件资源被配置为协作设备的硬件资源参数;根据工业协作任务下每个工业协作子任务的若干个操作步骤的执行顺序和操作时长,构建以通信延时与硬件资源的约束条件集和协作设备运算负荷的优化目标,采用优化算法求解工业协作执行策略; 其中,根据工业协作任务下每个工业协作子任务的若干个操作步骤的执行顺序和操作时长,构建以通信延时与硬件资源的约束条件集和协作设备运算负荷的优化目标,采用优化算法求解工业协作执行策略,具体包括: 根据工业协作任务下每个工业协作子任务的若干个操作步骤的执行顺序和操作时长,以每个子任务执行人员分配到协作设备后,每个协作设备在执行所分配到的工业协作子任务的任意一个操作步骤时的所在位置与该协作设备在执行当前操作步骤时对应的关联协作设备的所在位置的间隔距离不超过通信延时阈值距离为第一约束条件,每个协作设备在同一时间运行的自身协作设备驱动调用的场景识别与任务执行指导大模型和作为另一协作设备的关联协作设备驱动调用的场景识别与任务执行指导大模型的硬件资源需求总和小于该协作设备的硬件资源参数为第二约束条件,以每个协作设备在整个工业协作任务执行期间的硬件资源需求与硬件资源参数的平均比例在全部协作设备范围内的方差最小为优化目标,优化求解所述工业协作任务的协作设备分配子策略和场景识别执行子策略;基于所述工业协作任务的协作设备分配子策略和场景识别执行子策略,生成所述工业协作任务的工业协作执行策略; 利用所述工业协作执行策略中的协作设备分配子策略,驱使每个子任务执行人员配置对应的协作设备执行分配到的工业协作子任务;其中,所述协作设备包括AR显示装置、多模态数据采集装置和部署有不同类型大模型构成的多模态大模型库的动态场景识别装置; 利用所述工业协作执行策略中的场景识别执行子策略,驱使每个目标协作设备在每个数据传输通信周期与对应的关联协作设备建立通信链路,以使每个子任务执行人员基于目标协作设备的AR显示装置、多模态数据采集装置和关联协作设备的动态场景识别装置的动态场景识别与AR信息叠加结果,执行对应工业协作子任务的任务操作动作。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人工业云制造(四川)创新中心有限公司,其通讯地址为:610000 四川省成都市高新区益州大道中段599号13栋19层1908-1912号、20层2008-2012号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励