买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉北京智洋慧通数字科技有限公司申请的专利一种基于多模态的轨道异物入侵事件捕捉系统及方法获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN120339992B 。

龙图腾网通过国家知识产权局官网在2026-02-27发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202510384075.2，技术领域涉及：G06V20/58；该发明授权一种基于多模态的轨道异物入侵事件捕捉系统及方法是由许克;高军;朱贺;于慧珊;陈宽宽设计研发完成，并于2025-03-28向国家知识产权局提交的专利申请。

本一种基于多模态的轨道异物入侵事件捕捉系统及方法在说明书摘要公布了：本发明属于轨道安全监测的技术领域，更具体地，涉及一种基于多模态的轨道异物入侵事件捕捉系统及方法。所述方法包括定期采集轨道线路的图像序列；对图像序列中的每对相邻图像进行变化检测，识别出变化区域；对图像中的变化区域进行多模态特征提取；利用多模态提取到的图像特征和文本特征进行变化类型判断；然后生成文本答案和对应的视觉掩码，进一步验证变化类型；事件捕捉模块根据变化类型，确定是否为异物入侵事件，如果是异物入侵事件，则触发报警并记录事件信息。本发明以解决了现有技术在捕捉异物入侵时无法准确区分变化类型的问题。

本发明授权一种基于多模态的轨道异物入侵事件捕捉系统及方法在权利要求书中公布了：1.一种基于多模态的轨道异物入侵事件捕捉系统，其特征在于，所述系统包括：图像采集模块、变化检测模块、多模态特征提取模块、变化类型判断模块、事件捕捉模块； 所述图像采集模块，用于采集轨道线路的图像序列，构建线路巡防场景异物入侵的检测数据集；所述检测数据集包含图像对、描述性问题文本、文本答案以及对应的视觉掩码，用于支持多模态特征提取和变化类型判断； 所述变化检测模块，用于对图像序列中的相邻两帧图像进行变化检测，标记出变化区域； 所述多模态特征提取模块，用于提取变化区域的图像特征和文本特征； 所述多模态特征提取模块包括图像特征提取单元和文本特征提取单元； 图像特征提取单元用于对变化区域提取图像特征，包括残差网络和1×1卷积层，此外，图像特征提取单元还包括归一化层、池化层、激活函数以及特征融合模块，用于提取多尺度特征并增强模型的表达能力； 文本特征提取单元用于生成描述变化区域的文本问题，并提取文本特征，包括问题生成模块、文本编码器、特征提取模块、特征对齐模块和特征增强模块； 所述问题生成模块：用于预设问题模板，根据变化区域的图像内容自动生成描述性问题； 所述文本编码器：用于文本输入预处理，对描述变化区域的文本进行分词处理，并将其转换为嵌入向量； 所述特征提取模块：基于对比和图像对的预训练模型CLIPTransformer提取文本中的语义特征； 所述特征对齐模块：用于将文本特征与图像特征进行对齐，确保两者在空间和语义上的一致性； 特征增强模块：用于对提取的文本特征进行进一步处理，增强关键信息的表达能力； 所述变化类型判断模块，用于基于多模态特征，判断变化类型，区分新出现的异物、异物消失和异物类型改变； 所述事件捕捉模块，用于根据变化类型，确定是否为异物入侵事件，并进行相应的报警或记录。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人北京智洋慧通数字科技有限公司，其通讯地址为：100080 北京市海淀区半壁店甲1号院5号楼1层1512室；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。