中国航空综合技术研究所臧阳阳获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉中国航空综合技术研究所申请的专利基于多智能体强化学习的导管装配顺序优化方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119861667B 。
龙图腾网通过国家知识产权局官网在2026-03-03发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202411912341.6,技术领域涉及:G05B19/418;该发明授权基于多智能体强化学习的导管装配顺序优化方法是由臧阳阳;梁昭磊;潘讯;常志刚;梁家贤设计研发完成,并于2024-12-24向国家知识产权局提交的专利申请。
本基于多智能体强化学习的导管装配顺序优化方法在说明书摘要公布了:本发明涉及一种基于多智能体强化学习的导管装配顺序优化方法,属于质量与可靠性工程领域,其包括以下步骤:S1、基于导管装配引入多智能体强化学习框架,定义智能体及其状态空间;S2、定义智能体在状态空间内的动作空间;S3、定义智能体在各状态下采取指定动作对应的奖励函数,以及反映未来回报对当前决策影响程度的折扣因子;S4、定义各智能体在进行动作决策时的约束条件;S5、提出深度多智能体分层Q网络算法对导管装配顺序进行优化;S6、对导管装配位置优化方法进行验证。本发明提出了一种分层的深度多智能体Q网络算法,实现了装配顺序的优化,能够提升产品制造过程能力和质量的一致性和稳定性,为定量化技术支撑和决策提供依据。
本发明授权基于多智能体强化学习的导管装配顺序优化方法在权利要求书中公布了:1.一种基于多智能体强化学习的导管装配顺序优化方法,其特征在于:该方法具体步骤如下: S1、基于导管装配引入多智能体强化学习框架,定义智能体及其状态空间; 步骤S1具体包括以下子步骤: S11、分别定义总智能体和子智能体,其中,总智能体负责选择装配导管的序号以及开始装配导管的位置;子智能体和子智能体分别负责从某一端开始装配导管; S12、针对每一个智能体,定义其在t阶段的状态空间,其中,子智能体的状态空间包括:从某一端开始装配时在t阶段装配完成后导管末端的位置坐标以及在当前阶段选用导管的长度;总智能体的状态空间包括:各子智能体在t阶段装配完成后导管末端的位置坐标以及各子智能体在t阶段装配完成后导管所在直线与x、y、z轴正向的夹角; 子智能体的状态空间为: 子智能体的状态空间为: ; 其中,表示从第一端点开始装配时在阶段装配完成后导管末端的位置坐标,在初始阶段表示在当前阶段选用导管的长度;表示从第二端点开始装配时在阶段装配完成后导管末端的位置坐标,在初始阶段 总智能体的状态空间为: ; 其中, ; ; 其中,分别表示两个子智能体在上一个阶段的动作;、和分别表示导管所在直线与轴正向的夹角;下标last代表上一个阶段,上标1代表子智能体,上标2代表子智能体;在初始阶段,两端的为0,和均为;在后续阶段,由两个子智能体、进行决策更新; S2、基于定义的智能体及其状态空间,定义智能体在状态空间内的动作空间; S3、基于定义的智能体、状态空间和动作空间,定义智能体在各状态下采取指定动作对应的奖励函数,以及反映未来回报对当前决策影响程度的折扣因子; S4、定义各智能体在进行动作决策时的约束条件,约束条件包括装配角度偏差约束、装配末端位置约束以及离散动作空间约束,形成针对导管装配位置优化的强化学习模型; S5、基于针对导管装配位置优化的强化学习模型,得到深度多智能体分层Q网络算法对导管装配顺序进行优化; S6、基于深度多智能体分层Q网络算法,进行数值仿真分析,对导管装配位置优化方法进行验证。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人中国航空综合技术研究所,其通讯地址为:100028 北京市朝阳区东直门外京顺路7号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励