Document
拖动滑块完成拼图
个人中心

预订订单
服务订单
发布专利 发布成果 人才入驻 发布商标 发布需求

在线咨询

联系我们

龙图腾公众号
首页 专利交易 IP管家助手 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索
当前位置 : 首页 > 专利喜报 > 湖南大学张辉获国家专利权

湖南大学张辉获国家专利权

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

龙图腾网获悉湖南大学申请的专利基于孪生神经网络的时间序列相似度度量方法及终端获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119357707B

龙图腾网通过国家知识产权局官网在2025-09-16发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202411943130.9,技术领域涉及:G06F18/22;该发明授权基于孪生神经网络的时间序列相似度度量方法及终端是由张辉;张羽宏宣;别克扎提·巴合提;邱宇;杜瑞;钟杭;毛建旭;王耀南设计研发完成,并于2024-12-27向国家知识产权局提交的专利申请。

基于孪生神经网络的时间序列相似度度量方法及终端在说明书摘要公布了:本发明公开了一种基于孪生神经网络的时间序列相似度度量方法及终端,对时间序列数据样本进行两两分组配对为时间序列样本对并标注标签,将经过配对标注后的时间序列样本对输入到使用相同预训练大模型为分支的孪生神经网络中,得出时间序列间的相似度作为网络整体最终的输出,利用损失函数更新整个孪生神经网络与微调预训练大模型结合的网络权重。本发明针对小样本场景下的时间序列数据相似度度量任务,利用预训练大模型在时间序列领域表现出的强大能力,结合孪生神经网络在小样本相似度度量的优势,进行时间序列数据的相似度度量,只需要少量样本即可完成时间序列相似度的度量,能够全方位提取时间序列的特征,作为相似度度量的依据。

本发明授权基于孪生神经网络的时间序列相似度度量方法及终端在权利要求书中公布了:1.基于孪生神经网络的时间序列相似度度量方法,用于风力发电机组的时间序列数据相似度度量,所述时间序列数据包括风力发电机组的发电功率、风力发电机组在各高度风速、风力发电机组的温度、湿度,其特征在于,包括如下步骤: S1、对获取的时间序列数据样本进行两两分组配对,将配对的每个时间序列样本对根据时间序列数据样本是否相似进行标注标签; S2、将时间序列样本对输入孪生神经网络进行训练,所述孪生神经网络的两个分支使用相同的预训练大模型对时间序列样本对的两个时间序列数据样本进行处理,所述预训练大模型均具有位置嵌入层,所述位置嵌入层对输入的时间序列数据样本先进行时间序列的位置嵌入,采用Transformer正余弦位置编码对时间序列数据样本每个时间步的位置进行编码,所述预训练大模型通过每个时间步的位置编码感知时间序列的不同时间步,通过预训练大模型之间共享的多头注意力层得出时间序列数据样本中每个时间步数据的特征向量,所述多头注意力层通过如下子步骤输出时间序列数据样本中不同时间步数据的特征向量: S21、使用不同的权重矩阵将输入的时间序列数据样本投影到查询、键和值空间: Q=WQ·τ,J=WK·τ,V=WV·τ, 其中,τ为输入的时间序列数据样本,Q、K、V为时间序列数据样本分别到查询、键和值空间的投影,WQ、WK、WV分别为查询空间权重矩阵、键空间权重矩阵和值空间权重矩阵; S22、通过下式计算时间序列数据样本中每个时间步的查询和键的点积,并通过softmax归一化得到注意力权重: 其中,AttentionQ,K,V为注意力权重,是键的维度,T表示时间序列数据样本到键空间的投影转置; S23、使用注意力权重对时间序列数据样本到值空间的投影V进行加权求和,得到多头注意力层不同头的输出表示如下: Zι=AttentionQ,K,Vι·V, Zι表示多头注意力层的第ι个头输出的时间序列数据,AttentionQ,K,Vι表示多头注意力层的第ι个头的注意力权重; S24、将多头注意力层所有头的输出拼接起来并投影回原始维度,得到多头注意力层的最终输出如下: h=MultiHeadQ,K,V=ConcatZ1,Z2,...,Zι·Wo, 其中,h=MultiHeadQ,K,V为多头注意力层最终输出的时间序列数据特征向量,其包含了所有注意力头捕捉时间序列数据的依赖关系,组成时间序列数据样本中不同时间步数据之间的全局依赖关系,Z1,Z2,...,Zι是多头注意力层的ι个不同头的输出,Wo是输出投影矩阵; 在孪生神经网络加入Adapters层对预训练大模型进行微调,所述Adapters层插入在多头注意力层后,为两层的瓶颈结构,所述多头注意力层最终输出的时间序列数据首先经过下降层降维,然后经过非线性激活函数,最后经过上升层将降维后时间序列数据特征再投影回高维空间输出; 所述Adapters层的输出与多头注意力层最终输出的时间序列数据通过下式以残差连接的形式相加: h′=h+Adaptersh, 其中h为多头注意力层最终输出的时间序列数据,Adaptersh为Adapters层的输出,h’为多头注意力层和Adapters层共同的输出; S3、采用特征池化的方式整合时间序列数据样本中所有时间步数据的特征向量,所述时间序列数据样本经多头注意力层和Adapters层输出后,首先输入由两层全连接网络组成的前馈网络,对时间序列数据样本中每个时间步数据的特征表示进行逐步非线性变换,然后通过下式分别整合时间序列样本对内两个时间序列数据样本所有时间步数据的特征,分别提取时间序列数据样本最终的全局表示: 其中,Γ表示时间序列数据样本所有时间步数据经过平均池化操作后生成的特征向量,是时间序列数据样本中所有时间步数据的全局表示;ht″为前馈网络输出的时间序列数据样本在第t个时间步数据的特征向量,表示时间序列数据样本的长度,即包含的时间步数量; S4、使用时间序列数据样本池化后的特征向量之间的欧氏距离作为时间序列样本对的相似度度量的最终输出,结合步骤S1标注的标签对比损失函数来优化微调后的预训练大模型。

如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人湖南大学,其通讯地址为:410082 湖南省长沙市岳麓区麓山南路2号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由AI智能生成
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。