Document
拖动滑块完成拼图
个人中心

预订订单
商城订单
发布专利 发布成果 人才入驻 发布商标 发布需求

请提出您的宝贵建议,有机会获取IP积分或其他奖励

投诉建议

在线咨询

联系我们

龙图腾公众号
首页 专利交易 IP管家助手 科技果 科技人才 积分商城 国际服务 商标交易 会员权益 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索
当前位置 : 首页 > 专利喜报 > 中国科学技术大学;中国电子科技集团有限公司电子科学研究院陈可江获国家专利权

中国科学技术大学;中国电子科技集团有限公司电子科学研究院陈可江获国家专利权

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

龙图腾网获悉中国科学技术大学;中国电子科技集团有限公司电子科学研究院申请的专利一种抵御大语言模型滥用分析的文本保护方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119337229B

龙图腾网通过国家知识产权局官网在2025-09-09发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202411222749.0,技术领域涉及:G06F18/2415;该发明授权一种抵御大语言模型滥用分析的文本保护方法是由陈可江;张卫明;俞能海;赵嘉炜;郭庆浪设计研发完成,并于2024-09-02向国家知识产权局提交的专利申请。

一种抵御大语言模型滥用分析的文本保护方法在说明书摘要公布了:本发明公开了一种抵御大语言模型滥用分析的文本保护方法,首先将大语言模型的输出终止条件“endtoken”的负对数概率作为损失函数,进行反向传播以获取梯度;利用所获取的梯度,为受保护文本中的每个token构建替换集合;通过替换集合构建扰动文本,并将构建的扰动文本输入到大语言模型中,选择结果最佳的扰动文本作为下一轮的起始点,使大语言模型在分析受保护文本时输出结束符,实现文本保护。上述方法利用对抗样本技术对用户上传的互联网文本提供了面向大语言模型的保护,兼顾了有效性以及隐蔽性。

本发明授权一种抵御大语言模型滥用分析的文本保护方法在权利要求书中公布了:1.一种抵御大语言模型滥用分析的文本保护方法,其特征在于,所述方法包括: 步骤1、将大语言模型的输出终止条件“endtoken”的负对数概率作为损失函数,进行反向传播以获取梯度; 步骤2、利用步骤1所获取的梯度,为受保护文本中的每个token构建替换集合; 在步骤2中,使用一个one-hot向量表示受保护文本,定义损失函数并计算one-hot向量的梯度; 使用计算得到的one-hot向量的梯度构建替换集合 然后利用贪心搜索来确定最小化损失函数的最优替换; 所述步骤2的过程具体为: 给定受保护文本,记为将组成的每个token表示为将表示为一个one-hot向量则: 然后定义损失函数将损失函数定义为大语言模型预测的首个token的概率分布与终止条件endtoken对应概率为1的概率分布之间的交叉熵;具体来说,利用大语言模型logits层的输出g和终止条件endtoken的one-hot向量vend进行计算,即: 其中,H指交叉熵计算函数; 再计算与对应的one-hot向量的梯度hi: 梯度hi的每个维度对应于大语言模型词汇表V的一个token,记为hi[j],其中j∈{1,2,...,V};tokenj指词汇表中的第j个token; 为了找到语义上相近的token,利用Embedding向量来找到在Embedding层中“距离”近的token,Embedding向量指经过Embedding层映射后的token向量;具体来说,首先将大语言模型词典V中的所有token表示为Embedding向量,并使用l2范数对其进行归一化,得到一个新的集合V′,对于进行相同的操作,指输入promptP的第i个token;然后与新的集合V′中的所有向量进行点积运算,并选择结果最大的n个token作为语义相近token的集合Ni; 为了确保替换后的token与被保护文本保持相似性,同时使损失函数减小,从集合Ni中根据梯度hi选择最终的替换集合,具体来说: 对于tokenj∈Ni,按照hi[j]的值按降序对它们进行排序;选择前k个token作为最终的替换集合Si,记为Si=Top-kNi; 步骤3、通过替换集合构建扰动文本,并将构建的扰动文本输入到大语言模型中,选择结果最佳的扰动文本作为下一轮的起始点,使大语言模型在分析受保护文本时输出结束符,实现文本保护。

如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人中国科学技术大学;中国电子科技集团有限公司电子科学研究院,其通讯地址为:230026 安徽省合肥市包河区金寨路96号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。