深圳市中和达汇电子有限公司钟琼艳获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉深圳市中和达汇电子有限公司申请的专利一种基于多模态交互的人宠对讲方法及系统获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN120636418B 。
龙图腾网通过国家知识产权局官网在2026-01-06发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202510786448.9,技术领域涉及:G10L17/26;该发明授权一种基于多模态交互的人宠对讲方法及系统是由钟琼艳;钟涵睿;王天翊设计研发完成,并于2025-06-12向国家知识产权局提交的专利申请。
本一种基于多模态交互的人宠对讲方法及系统在说明书摘要公布了:本申请公开了一种基于多模态交互的人宠对讲方法及系统,涉及人工智能领域。该方法包括:接收用户设备端针对目标宠物发送的对话信号,根据本地语言库确定对话信号对应的动物语音信息,本地语言库包括每种对话信号与动物语音信息之间的对应关系;获取目标宠物针对对话信号的实时反映数据,实时反映数据包括目标宠物的声音数据、动作图像数据和环境数据;将实时反映数据输入至多模态翻译模型,得到目标宠物针对对话信号做出回应的翻译结果,并将翻译结果发送至用户设备。本申请实施例中翻译结果中整合了声音数据、动作数据和环境数据,实现了数据的高效融合,提升了翻译可靠性的同时解决了低置信度误判率高的问题,提升了人宠交互的准确性与适应性。
本发明授权一种基于多模态交互的人宠对讲方法及系统在权利要求书中公布了:1.一种基于多模态交互的人宠对讲方法,其特征在于,所述方法由宠物设备端执行,所述方法包括: 接收用户设备端针对目标宠物发送的对话信号,并根据本地语言库确定所述对话信号对应的动物语音信息,所述本地语言库包括每种对话信号与动物语音信息之间的对应关系; 获取所述目标宠物针对所述对话信号的实时反映数据,所述实时反映数据包括所述目标宠物的声音数据、动作图像数据和环境数据; 将所述实时反映数据输入至多模态翻译模型,得到所述目标宠物针对所述对话信号做出回应的翻译结果,并将所述翻译结果发送至所述用户设备; 所述多模态翻译模型包括输入层、编码器和解码器,所述将所述实时反映数据输入至多模态翻译模型,得到所述目标宠物针对所述对话信号做出回应的翻译结果,包括: 基于所述输入层对所述实时反映数据中的声音数据、动作图像数据和环境数据分别进行特征提取处理,得到所述声音数据对应的声音特征、所述动作图像数据对应的图像特征和所述环境数据对应的环境特征, 基于所述编码器对到所述声音特征和所述图像特征进行跨模态语义融合处理,得到融合后的特征; 将所述融合后的特征和所述环境特征输入至所述解码器,以使所述解码器根据所述融合后的特征和所述环境特征进行动态翻译生成处理,得到所述目标宠物针对所述对话信号做出回应的翻译结果; 所述编码器包括动态跨模态注意力层、稀疏局部注意力层和自适应噪声抑制层,所述基于所述编码器对到所述声音特征和所述图像特征进行跨模态语义融合处理,得到融合后的特征,包括: 基于所述稀疏局部注意力层确定所述声音特征对应的每个局部窗口,并通过跳跃连接将所述每个局部窗口的特征进行整合,得到优化后的声音特征; 基于所述自适应噪声抑制层,对所述优化后的声音特征和所述图像特征进行降噪处理,得到降噪后的声音特征和降噪后的图像特征; 通过所述动态跨模态注意力层对所述降噪后的声音特征和所述降噪后的图像特征进行自注意力融合计算,得到融合后的特征。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人深圳市中和达汇电子有限公司,其通讯地址为:518000 广东省深圳市龙岗区坂田街道马安堂社区中兴路11号新塘智慧园A栋511;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励