海信视像科技股份有限公司李绪送获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉海信视像科技股份有限公司申请的专利一种数据处理方法、装置和电子设备获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN115617162B 。
龙图腾网通过国家知识产权局官网在2026-03-27发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202211119932.9,技术领域涉及:G06F3/01;该发明授权一种数据处理方法、装置和电子设备是由李绪送;马明;付爱国;沈杨;杨善松设计研发完成,并于2022-09-14向国家知识产权局提交的专利申请。
本一种数据处理方法、装置和电子设备在说明书摘要公布了:本公开涉及一种数据处理方法、装置和电子设备,涉及人机交互技术领域,语音解决如何通过数据虚拟人来播报答复信息的问题。该方法包括:接收电子设备发送的用于触发人机交互的语音信息;对语音信息进行识别,确定语音信息的回复信息;将回复信息输入至文本驱动模型,确定目标关键点集合;向电子设备发送携带回复信息和目标关键点集合的目标信息,以便电子设备根据预先配置的虚拟数字人的脸部对应的预设关键点集合、回复信息和目标关键点集合生成虚拟数字人的渲染图像。
本发明授权一种数据处理方法、装置和电子设备在权利要求书中公布了:1.一种数据处理方法,其特征在于,包括: 接收电子设备发送的用于触发人机交互的语音信息; 对所述语音信息进行识别,确定所述语音信息的回复信息; 将所述回复信息输入至文本驱动模型,确定目标关键点集合;其中,所述目标关键点集合中至少包括用于指示嘴巴和眼睛的关键点; 向所述电子设备发送携带所述回复信息和所述目标关键点集合的目标信息,以便所述电子设备根据预先配置的虚拟数字人的脸部对应的预设关键点集合、所述回复信息和所述目标关键点集合生成所述虚拟数字人的渲染图像,所述预设关键点集合至少包括用于指示嘴巴和眼睛的关键点;其中, 所述文本驱动模型的训练过程包括: 获取训练样本视频,和所述训练样本视频的标记结果;其中,所述训练样本视频包括指定人物在所述训练样本视频中讲话对应的实际文本数据,以及所述指定人物在讲话过程中所述实际文本数据对应的人脸图像,所述标记结果包括所述人脸图像的实际关键点; 将所述指定人物在静止状态下的人脸图像对应的初始特征点和训练文本数据至目标模型,确定所述目标模型预测的预测关键点;其中,所述目标模型采用的模型架构为基于Transformer结构的FastSpeechFastSpeech2模型结构; 基于所述预测关键点和所述实际关键点,调整所述目标模型的网络参数,直至所述目标模型收敛,得到所述文本驱动模型;所述基于所述预测关键点和所述实际关键点,调整所述目标模型的网络参数,直至所述目标模型收敛,得到所述文本驱动模型,包括: 基于第一目标损失函数、所述预测关键点和所述实际关键点,确定用于指示嘴巴的关键点对应的面积差值; 对第二目标损失函数、所述预测关键点和所述实际关键点进行匹配,确定相匹配的两个关键点之间的距离; 基于第三目标损失函数、所述预测关键点和所述实际关键点进行匹配,确定相匹配的两个关键点之间的梯度差值; 根据所述面积差值、所述距离和所述梯度差值,调整所述目标模型的网络参数,直至所述目标模型收敛,得到所述文本驱动模型。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人海信视像科技股份有限公司,其通讯地址为:266555 山东省青岛市经济技术开发区前湾港路218号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励