Document
拖动滑块完成拼图
个人中心

预订订单
商城订单
发布专利 发布成果 人才入驻 发布商标 发布需求

请提出您的宝贵建议,有机会获取IP积分或其他奖励

投诉建议

在线咨询

联系我们

龙图腾公众号
首页 专利交易 IP管家助手 科技果 科技人才 积分商城 国际服务 商标交易 会员权益 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索
当前位置 : 首页 > 专利喜报 > 北京火山引擎科技有限公司孟嘉霖获国家专利权

北京火山引擎科技有限公司孟嘉霖获国家专利权

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

龙图腾网获悉北京火山引擎科技有限公司申请的专利用于大语言模型的模型评估方法、装置、介质及设备获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN121008999B

龙图腾网通过国家知识产权局官网在2026-02-06发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202511538152.1,技术领域涉及:G06F11/3604;该发明授权用于大语言模型的模型评估方法、装置、介质及设备是由孟嘉霖;赵楠;张洋;汪乾傲;田志龙;崔洺源;刘武利;李豪;尹小明设计研发完成,并于2025-10-24向国家知识产权局提交的专利申请。

用于大语言模型的模型评估方法、装置、介质及设备在说明书摘要公布了:一种用于大语言模型的模型评估方法、装置、介质及设备,涉及大语言模型技术领域,所述方法包括:根据第一配置指令,生成用于对大语言模型进行模型评估的评估工作流,其中,所述评估工作流中包含评估节点;根据第二配置指令,确定所述评估节点对应的评估方法;基于评估数据集执行所述评估工作流,以在执行所述评估节点时基于所述评估方法和所述评估数据集对所述大语言模型进行模型评估,其中,所述评估数据集中包含至少一个评估题目。由此在对大语言模型进行模型评估时,可以通过编排而生成用于评估的评估工作流,无需评估人员进行脚本编写,既可以降低人工工作量,又可以提高评估工作流编排的灵活性,提升评估工作流和实际评估任务的适配性。

本发明授权用于大语言模型的模型评估方法、装置、介质及设备在权利要求书中公布了:1.一种用于大语言模型的模型评估方法,其特征在于,所述模型评估方法包括: 根据第一配置指令,生成用于对大语言模型进行模型评估的评估工作流,其中,所述评估工作流中包含评估节点; 根据第二配置指令,确定所述评估节点对应的评估方法,其中,若所述第二配置指令中包含方法标识,则将方法库中所述方法标识指示的方法作为所述评估方法,所述方法库中预先配置有多个方法;若所述第二配置指令中包含方法代码,则将所述方法代码对应的方法作为所述评估方法; 根据第三配置指令,确定所述评估节点对应的元信息,其中,所述元信息包含评估字段和所述评估字段的字段值的类型; 基于评估数据集执行所述评估工作流,以在执行所述评估节点时基于所述评估方法和所述评估数据集对所述大语言模型进行模型评估,其中,所述评估数据集中包含至少一个评估题目; 在执行完所述评估节点之后,基于所述元信息存储所述评估节点对应的评估字段的字段值; 其中,所述基于评估数据集执行所述评估工作流,包括: 确定所述评估数据集的快照; 基于所述评估数据集的快照中的评估题目执行所述评估工作流。

如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人北京火山引擎科技有限公司,其通讯地址为:100190 北京市海淀区紫金数码园4号楼13层1309;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。