Document
拖动滑块完成拼图
个人中心

预订订单
商城订单
发布专利 发布成果 人才入驻 发布商标 发布需求

请提出您的宝贵建议,有机会获取IP积分或其他奖励

投诉建议

在线咨询

联系我们

龙图腾公众号
首页 专利交易 IP管家助手 科技果 科技人才 积分商城 国际服务 商标交易 会员权益 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索
当前位置 : 首页 > 专利喜报 > 山东大学邵明杰获国家专利权

山东大学邵明杰获国家专利权

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

龙图腾网获悉山东大学申请的专利一种基于自监督学习的语言查询目标声音提取方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN118800269B

龙图腾网通过国家知识产权局官网在2025-11-25发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202410688469.2,技术领域涉及:G10L21/0272;该发明授权一种基于自监督学习的语言查询目标声音提取方法是由邵明杰;马豪;刘琚;彭志远;李静设计研发完成,并于2024-05-30向国家知识产权局提交的专利申请。

一种基于自监督学习的语言查询目标声音提取方法在说明书摘要公布了:本发明公开了一种基于自监督学习的语言查询目标声音提取方法。该方法可以在不需要人工标注的文本‑音频数据对的情况下,训练一个以自然语言查询作为条件的目标声音提取系统。具体而言,本发明基于对比学习的音频文本预训练模型,首先使用预训练模型的文本编码器对大量的文本数据进行编码,构建离线文本特征缓存,之后通过相似性匹配算法,从文本特征缓存中提取并构建与目标音频匹配的文本特征,并以此特征作为条件,指导目标声音提取网络在包含目标音频的混合音频中提取出目标音频。本发明所提方法在多个数据集上的评估表现优异,各项指标均接近或者超过有监督学习的方法,证明本发明具有较强的实用价值。

本发明授权一种基于自监督学习的语言查询目标声音提取方法在权利要求书中公布了:1.一种基于自监督学习的语言查询目标声音提取方法,该方法在模型训练时,基于对比学习音频文本预训练模型,自动构造与目标音频匹配的文本特征向量,从而可以实现在不需要人工标注的音频-文本数据对的情况下,训练一个基于自然语言查询的目标声音提取系统,具体步骤包括: 步骤1:构建离线文本特征缓存:准备音频描述文本库,包含N条音频描述文本,使用对比学习音频文本预训练模型的文本编码器,分别对每一条文本提取一个D维的文本特征向量,从而构建一个N×D维的离线文本特征缓存; 步骤2:自监督地训练语言查询目标声音提取系统,包括: 步骤2.1:构建训练音频,所述训练音频包含混合音频和目标音频,具体为:准备音频数据库,包含M段音频,在每一步的训练过程中,任意从音频数据库中抽取出两段不同的音频,将其中的一段视为要提取的目标音频,另一段视为干扰音频,两段音频加权相加后构造信号干扰比为R的混合音频; 步骤2.2:基于相似性匹配构造与目标音频匹配的文本特征向量:使用对比学习音频文本预训练模型的音频编码器,对目标音频提取D维的音频特征向量,将该音频特征向量视为查询向量,并将步骤1中构建的文本特征缓存视为键、值向量,通过查询向量与键向量之间的点积运算得到相似度得分,并以相似度得分为权重,将得分最大的K个键向量对应的值向量进行加权和计算,加权和向量经过L2归一化后即可获得与目标音频匹配的文本特征向量; 步骤2.3:训练目标声音提取模型:构造深度神经网络模型,该模型以步骤2.1获得的混合音频作为模型输入,以步骤2.2获得的文本特征向量作为条件输入,该模型以文本特征向量为条件,在混合音频中提取出目标音频,基于提取音频与步骤2.1中的目标音频的相似度构造损失函数,使用梯度下降算法训练模型; 步骤3:语言查询目标声音提取系统推理:用户输入任意包含多个声音事件的音频,并输入待提取音频事件的自然语言描述,使用对比学习音频文本预训练模型的文本编码器,对输入的自然语言进行编码,得到D维的文本特征向量,步骤2.3中训练好的提取模型即可在该特征向量的控制下,提取出输入音频中用户想要提取的目标声音。

如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人山东大学,其通讯地址为:266237 山东省青岛市即墨区滨海路72号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。