中国康复科学所(中国残联残疾预防与控制研究中心)孙潇蒙获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉中国康复科学所(中国残联残疾预防与控制研究中心)申请的专利特定病种辅助诊疗大语言模型应用的评估系统及方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN120373471B 。
龙图腾网通过国家知识产权局官网在2026-02-17发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202510855240.8,技术领域涉及:G06N5/04;该发明授权特定病种辅助诊疗大语言模型应用的评估系统及方法是由孙潇蒙;廖利民;陈迪;李晨;刘昕;张赢心设计研发完成,并于2025-06-25向国家知识产权局提交的专利申请。
本特定病种辅助诊疗大语言模型应用的评估系统及方法在说明书摘要公布了:本发明提供了一种特定病种辅助诊疗大语言模型应用的评估系统及方法,涉及临床医学、辅助诊疗与人工智能技术领域,系统包括:模型层用于构建RAG检索策略,适配特定病种辅助诊疗大语言模型应用;基座模型评估层用于对辅助诊疗大语言模型基座LLM进行特定病种的知识领域的基础能力评估;基础能力评估层用于对特定病种辅助诊疗大语言模型应用的输出结果进行正确性评估;证据链评估层用于对特定病种辅助诊疗大语言模型应用的输出结果进行证据链完整性评估与证据时效性评估;合规性评估层用于评估特定病种辅助诊疗大语言模型应用在隐私化处理和伦理问题的处理能力。本发明提高了针对特定病种辅助诊疗大语言模型应用能力评估的准确性与全面性。
本发明授权特定病种辅助诊疗大语言模型应用的评估系统及方法在权利要求书中公布了:1.一种特定病种辅助诊疗大语言模型应用的评估系统,其特征在于,包括: 模型层,用于构建RAG检索策略,以基于所述RAG检索策略搭建或调整基于RAG技术的特定病种辅助诊疗大语言模型应用; 基座模型评估层,用于对辅助诊疗大语言模型基座LLM进行面向特定病种的多维度评估,以评估所述辅助诊疗大语言模型基座LLM在所述特定病种的知识领域的基础能力;其中,多维度评估包括对专业知识掌握程度、语义理解和逻辑推理以及检索模块性能进行评估; 基础能力评估层,用于构建面向特定病种知识领域的多种形式的评估数据集,并基于所述评估数据集对所述特定病种辅助诊疗大语言模型应用的输出结果进行正确性评估;其中,所述评估数据集面向所述特定病种分为4个领域,分别为:医学知识的定义与解释、症状识别与诊断、治疗方案的设计与选择、医学文献检索;各领域的评估数据集为面向所述特定病种知识领域的临床问题+参考答案的组合形式; 证据链评估层,用于基于所述基础能力评估层的评估数据集对所述特定病种辅助诊疗大语言模型应用的输出结果进行证据链完整性评估与证据时效性评估;其中,所述证据链评估评估包括:在所述基础能力评估层,基于所述评估数据集的特定病种辅助诊疗大语言模型应用,在输出结果的同时一并输出其所参考的原始段落以及所述原始段落的元数据,计算通过人工判别为相关的原始段落的数量与原始段落返回数的比例得到有效性证据占比;或者将输入问题和返回的各参考的原始段落进行向量化处理,计算所述输入问题和所述各参考的原始段落的余弦相似度,根据所述余弦相似度与阈值的关系确定参考的原始段落与输入问题的相关性,并计算判定为相关的原始段落的数量与原始段落返回数的比例得到有效性证据占比;基于所述元数据中所述原始段落所在刊物书籍的发表年份以及当前年份,通过公式计算证据时效指数,其中,Δt=‑Y,Y为发表年份,为当前年份,α为领域特定的衰减系数,并计算同一输出结果所参考的k个参考原始段落的证据时效指数的平均数,得到该输出结果的证据时效指数;计算同一输出结果所参考的n个被标记为相关的参考的原始段落的证据时效指数的平均数,得到该输出结果的有效证据时效指数; 合规性评估层,用于构建基于所述特定病种知识领域的隐私评估数据集和伦理评估数据集,并基于所述隐私评估数据集和所述伦理评估数据集评估所述特定病种辅助诊疗大语言模型应用在隐私化处理和伦理问题的处理能力。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人中国康复科学所(中国残联残疾预防与控制研究中心),其通讯地址为:100053 北京市丰台区角门北路10号F段6层;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励