科大讯飞股份有限公司徐景明获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉科大讯飞股份有限公司申请的专利模型质量评测方法、装置、电子设备和存储介质获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN120748372B 。
龙图腾网通过国家知识产权局官网在2025-12-09发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202511204998.1,技术领域涉及:G10L15/01;该发明授权模型质量评测方法、装置、电子设备和存储介质是由徐景明;葛丽娜;田定书;李如子设计研发完成,并于2025-08-27向国家知识产权局提交的专利申请。
本模型质量评测方法、装置、电子设备和存储介质在说明书摘要公布了:本发明涉及人工智能技术领域,提供了一种模型质量评测方法、装置、电子设备和存储介质,方法包括:基于待评测的语音交互大模型,确定对话数据的应答结果;基于应答结果,确定语音交互大模型在客观评测指标和主观评测指标下的指标评测结果;基于客观评测指标和主观评测指标下的指标评测结果,确定质量评测结果,克服了目前评测维度单一、评测结果不够客观、全面的缺陷,结合客观评测指标和主观评测指标进行质量评测,能够将评测过程从单一的、侧重于机器性能的维度扩展到兼顾客观事实和主观体验的综合维度,从而使得最终生成的质量评测结果更加全面、科学、客观,进而可为模型的后续迭代优化提供明确、可靠的依据,显著提升了最终产品的用户体验。
本发明授权模型质量评测方法、装置、电子设备和存储介质在权利要求书中公布了:1.一种模型质量评测方法,其特征在于,包括: 确定用于模型质量评测的对话数据; 将所述对话数据输入至待评测的语音交互大模型,由所述语音交互大模型对所述对话数据进行应答,得到所述对话数据的应答结果; 基于所述应答结果,分别确定所述语音交互大模型在客观评测指标和主观评测指标下的指标评测结果; 基于所述语音交互大模型在客观评测指标和主观评测指标下的指标评测结果,确定所述语音交互大模型的质量评测结果; 所述主观评测指标包括共情度; 所述语音交互大模型在所述共情度下的指标评测结果基于如下步骤确定; 确定交互初始状态,所述交互初始状态中包含用户情感状态; 基于所述交互初始状态和所述对话数据,模拟用户与所述语音交互大模型进行多轮交互,得到所述多轮交互的对话数据,以及所述多轮交互中每一轮交互的情感变化和情感得分;每一轮交互的对话数据中包含所述语音交互大模型输出的应答结果;所述多轮交互中每一轮交互的输入基于上一轮交互的情感变化和情感得分确定; 基于所述多轮交互的对话数据,以及所述多轮交互中每一轮交互的情感变化和情感得分,确定所述语音交互大模型在所述共情度下的指标评测结果。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人科大讯飞股份有限公司,其通讯地址为:230088 安徽省合肥市高新开发区望江西路666号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励