买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉北京市燃气集团有限责任公司申请的专利一种基于强化学习的燃气表端异常流量识别系统获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN116561679B 。

龙图腾网通过国家知识产权局官网在2025-07-08发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202310514720.9，技术领域涉及：G06F18/243；该发明授权一种基于强化学习的燃气表端异常流量识别系统是由王铁强;汪建平;龙龙;孙俊芳;王倩微;王勋;刘兴伟;陈婷婷设计研发完成，并于2023-05-09向国家知识产权局提交的专利申请。

本一种基于强化学习的燃气表端异常流量识别系统在说明书摘要公布了：本发明提供一种基于强化学习的燃气表端异常流量识别系统。所述系统采用强化学习框架，包括作为智能体的决策模块、特征提取模块和价值生成模块；特征提取模块基于燃气表端输出的状态数据序列进行特征向量提取，决策模块输出表示燃气流量是否正常的决策值，每个决策值用作智能体执行的一个动作；价值生成模块输出决策值创造的价值；以所述价值作为期望收益，通过强化学习获得最大期望收益。本发明通过采用强化学习框架，不需要对数据进行人工筛选和标注，仅需调用燃气表端自有数据和燃气经营主体自有的历史数据进行模型训练，即可对燃气表端是否出现异常流量进行识别。

本发明授权一种基于强化学习的燃气表端异常流量识别系统在权利要求书中公布了：1.一种基于强化学习的燃气表端异常流量识别系统，其特征在于，所述系统采用强化学习框架，包括作为智能体的决策模块、特征提取模块和价值生成模块；决策模块和特征提取模块的输入为燃气表端输出的状态数据序列，特征提取模块基于所述状态数据序列进行特征向量提取，决策模块输出表示燃气流量是否正常的决策值，每个决策值用作智能体执行的一个动作；决策模块输出的决策值与特征提取模块输出的特征向量融合后输入至价值生成模块，价值生成模块输出决策值创造的价值；以所述价值作为期望收益，通过强化学习获得最大期望收益； 所述燃气表端输出的状态数据序列为： ST＝{s1,s2,…,st,…,sT} 式中，ST为状态数据序列，st为第t个数据采集周期的状态数据，t＝1,2,…,T，T为状态数据序列长度； 所述决策模块由第一递归神经网络组成，其输出决策值的计算方法包括： 设置第一递归神经网络的初始隐变量h0为全0向量； 按下式计算第t个隐变量ht： ht＝f1UAst-1+WAht-1+bA 式中，UA、WA、bA为可训练参数，f1为激活函数，t＝1,2,…,T； 按下式计算决策模块输出的决策值： α＝f1VAhT+cA 式中，α为决策值，VA、cA为可训练参数； 所述特征提取模块由第二递归神经网络组成，其输出特征向量的计算方法包括： 设置第二递归神经网络的初始隐变量e0为全0向量； 按下式计算第t个隐变量et： et＝f2UFst-1+WFet-1+bF 式中，UF、WF、bF为可训练参数，f2为激活函数，t＝1,2,…,T； 按下式计算特征提取模块输出的特征向量： 式中，fT为特征提取模块输出的特征向量； 所述决策模块输出的决策值α插入特征提取模块输出的特征向量fT的首位，得到融合向量[α,fT]； 所述价值生成模块的输出QT为： QT＝WQ[α,fT]+bQ 式中，WQ、bQ为可训练参数。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人北京市燃气集团有限责任公司，其通讯地址为：100035 北京市西城区西直门南小街22号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。