买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉国网河北省电力有限公司信息通信分公司;华瑞新智科技(北京)有限公司;国家电网有限公司申请的专利图文跨模态检索方法、装置、电子设备及存储介质获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN117076695B 。

龙图腾网通过国家知识产权局官网在2025-09-05发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202311020332.1，技术领域涉及：G06F16/432；该发明授权图文跨模态检索方法、装置、电子设备及存储介质是由辛锐;欧中洪;陈曦;路欣;刘明硕;王少影;姜丹;张博;尹晓宇;章涵宇;田子敬设计研发完成，并于2023-08-14向国家知识产权局提交的专利申请。

本图文跨模态检索方法、装置、电子设备及存储介质在说明书摘要公布了：本发明提供一种图文跨模态检索方法、装置、电子设备及存储介质。该方法包括：在预设图片库和预设文本库中进行样本筛选，得到图片样本和文本样本；图片样本与文本样本中包括至少同一种实体目标；对文本样本进行实体抽取，得到文本样本的实体目标；对图片样本进行分割，得到图片样本的M×N个区块；分别计算实体目标在每个区块内的权重，根据权重确定图片样本的高频实体目标；提取每个区块的文本提示信息，并将文本提示信息添加到实体目标对应的文本后；分别提取各区块和添加信息后的实体目标对应的文本的特征向量，并基于特征向量和高频实体目标进行合并。本发明能够确定实体的相对位置，进一步提高跨模态检索的准确性。

本发明授权图文跨模态检索方法、装置、电子设备及存储介质在权利要求书中公布了：1.一种图文跨模态检索方法，其特征在于，包括：在预设图片库和预设文本库中进行样本筛选，得到图片样本和文本样本；所述图片样本与所述文本样本中包括至少同一种实体目标； 对所述文本样本进行实体抽取，得到所述文本样本的实体目标；对所述图片样本进行分割，得到所述图片样本的M×N个区块；分别计算所述实体目标在每个区块内的权重，根据所述权重确定所述图片样本的高频实体目标； 提取各区块的文本提示信息，并将所述文本提示信息添加到所述实体目标对应的文本后；其中，所述文本提示信息包括所属区块的标识以及区块生成的对象标记；分别提取各区块和所述添加信息后的实体目标对应的文本的特征向量，并基于所述特征向量和所述高频实体目标进行合并； 其中，所述分别提取各区块和所述添加信息后的实体目标对应的文本的特征向量，基于所述特征向量和所述高频实体目标进行合并，包括： 采用图片编码器分别对各区块进行特征提取，得到各区块的第一特征向量； 采用文本编码器对所述添加信息后的实体目标对应的文本进行特征提取，得到第二特征向量； 将所述第一特征向量和所述第二特征向量进行编码处理，并将编码处理后的第一特征向量和第二特征向量映射到预设的共享子空间； 根据构建的张量将所述共享子空间中编码处理后的所述第一特征向量和所述第二特征向量进行乘积，得到跨模态融合后的各区块和所述实体目标对应的文本； 基于所述跨模态融合后的各区块和所述实体目标对应的文本以及所述高频实体目标进行合并。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人国网河北省电力有限公司信息通信分公司;华瑞新智科技(北京)有限公司;国家电网有限公司，其通讯地址为：050026 河北省石家庄市裕华区富强大街10号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。