买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉山东栋梁科技设备有限公司申请的专利基于多模态数据的人机交互方法获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN120561522B 。

龙图腾网通过国家知识产权局官网在2025-10-03发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202511061708.2，技术领域涉及：G06F18/20；该发明授权基于多模态数据的人机交互方法是由王亮亮;高怀香;吴子恒;蒋作栋;刁秀珍;柴海洋;褚凤志;刘艳立;王文龙设计研发完成，并于2025-07-31向国家知识产权局提交的专利申请。

本基于多模态数据的人机交互方法在说明书摘要公布了：本发明涉及数据处理技术领域，尤其涉及一种基于多模态数据的人机交互方法，该方法实时获取多模态交互数据；针对任一模态交互数据，获取任一模态交互数据的数据质量性能评估值和实时响应性能评估值，得到任一模态交互数据的最优性能补偿值；利用最优性能补偿值对传统下计算的性能值进行修正，得到任一模态交互数据的最终性能值；获取每个模态交互数据的最终性能值，得到每个模态交互数据的权重；根据每个模态交互数据的权重，获取每个模态交互数据的加权梯度，根据每个模态交互数据的加权梯度进行梯度融合和模型更新，得到更新后的语言模型，用于输出多模态交互数据的应答信息，通过性能补偿有效的解决人机交互中出现的模态失衡缺陷。

本发明授权基于多模态数据的人机交互方法在权利要求书中公布了：1.基于多模态数据的人机交互方法，其特征在于，所述方法包括： 实时获取多模态交互数据，所述多模态交互数据包括视觉数据、听觉数据和触觉数据； 针对任一模态交互数据，对所述任一模态交互数据进行有效数据和噪声干扰分析，得到所述任一模态交互数据的数据质量性能评估值；根据所述任一模态交互数据所含的数据量和数据响应延迟时间，获取所述任一模态交互数据的实时响应性能评估值；结合所述数据质量性能评估值和所述实时响应性能评估值，得到所述任一模态交互数据的最优性能补偿值； 获取利用动态梯度调制计算的所述任一模态交互数据的性能值，利用所述最优性能补偿值对所述性能值进行修正，得到所述任一模态交互数据的最终性能值；获取每个模态交互数据的最终性能值，得到每个模态交互数据的权重； 根据每个模态交互数据的权重，获取每个模态交互数据的加权梯度，根据每个模态交互数据的加权梯度进行梯度融合和模型更新，得到更新后的语言模型，用于输出多模态交互数据的应答信息； 所述对所述任一模态交互数据进行有效数据和噪声干扰分析，得到所述任一模态交互数据的数据质量性能评估值，包括： 获取所述任一模态交互数据中的有效数据数量与总数据数量之间的比值，对所述比值进行归一化处理，得到数据有效性指标，计算所述任一模态交互数据的信噪比，对所述信噪比进行归一化处理，得到数据可靠性指标，根据所述数据有效性指标和所述数据可靠性指标的均值，得到所述任一模态交互数据的数据质量性能评估值； 所述根据所述任一模态交互数据所含的数据量和数据响应延迟时间，获取所述任一模态交互数据的实时响应性能评估值，包括： 获取所述任一模态交互数据所含的数据量在所有模态交互数据的数据总量的占比，对所述占比进行归一化处理，得到数据量评估值，根据所述任一模态交互数据从输入到输出的时长，得到所述任一模态交互数据的数据响应延迟时间，将所述数据响应延迟时间的相反数作为以自然常数为底数的指数函数的自变量，得到交互实时性指标；对所述数据量评估值和所述交互实时性指标进行加权处理，得到所述任一模态交互数据的实时响应性能评估值； 所述根据每个模态交互数据的权重，获取每个模态交互数据的加权梯度，包括： 针对任一模态交互数据，获取所述任一模态交互数据的梯度，计算所述任一模态交互数据的权重与预设平滑系数的相加值，将所述相加值的倒数与所述梯度的乘积作为所述任一模态交互数据的加权梯度。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人山东栋梁科技设备有限公司，其通讯地址为：250002 山东省济南市市中区腊山路18号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。