浙江工业大学李伟获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉浙江工业大学申请的专利基于双重注意力的图像界面自动生成代码方法及装置获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN114463604B 。
龙图腾网通过国家知识产权局官网在2025-07-08发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202210027565.3,技术领域涉及:G06F8/34;该发明授权基于双重注意力的图像界面自动生成代码方法及装置是由李伟;余孝琴;李澎林;余文杰设计研发完成,并于2022-01-11向国家知识产权局提交的专利申请。
本基于双重注意力的图像界面自动生成代码方法及装置在说明书摘要公布了:本发明公开了一种基于双重注意力的图像界面自动生成代码方法及装置,使用DSL描述GUI,基于Resnet50提取图像特征,采用双层LSTM提取上下文向量,图像特征与上下文向量联合输入双重注意力模块,分别计算通道注意力和空间注意力,让网络对输入图片的特征多方面进行加权重处理,生成层结合注意力输出分类分数张量,模型输出的DSL序列最后经Compiler编译特定平台源码。本发明提出的融合空间注意力机制和通道注意力双重注意力机制,能够在解码器学习DSL变量关系时,提供当前时间步对应GUI组件空间位置,并按照计算的通道重要程度分配对关键图像特征图的有效关注,极大增强了网络学习能力、提高了图像界面生成代码的准确率。
本发明授权基于双重注意力的图像界面自动生成代码方法及装置在权利要求书中公布了:1.一种基于双重注意力的图像界面自动生成代码方法,其特征在于,所述基于双重注意力的图像界面自动生成代码方法,包括: 对含有GUI图像界面与对应DSL文件的数据集进行预处理,获得训练集,训练集中每个训练样本包括与GUI图像界面对应的图像界面张量,以及与DSL文件对应的DSL向量; 构建并训练图像界面DSL序列预测模型,所述图像界面DSL序列预测模型包括注意力层、特征提取器、双重注意力模块、生成层和分类层,将所述DSL向量输入到注意力层提取出上下文向量,将所述图像界面张量输入到所述特征提取器提取出多尺度特征图,所述多尺度特征图与上下文向量输入到双重注意力模块,提取出双重注意力特征,所述双重注意力特征与上下文向量输入到生成层生成分类分数张量,所述分类分数张量经过分类器输出DSL序列; 采用训练好的图像界面DSL序列预测模型对输入的待处理图像界面进行预测,预测出对应的DSL序列,经编译器编译得到对应平台代码; 其中,所述多尺度特征图与上下文向量输入到双重注意力模块,提取出双重注意力特征,包括: 将多尺度特征图变换为空间特征图,然后经过卷积操作后与上下文向量经过softmax函数生成空间权重向量,将所述空间权重向量与空间特征图相乘得到空间注意力特征; 将多尺度特征图变换为通道特征图,然后经过卷积操作后与上下文向量经过softmax函数生成通道权重向量,将所述通道权重向量与通道特征图相乘得到通道注意力特征; 将所述空间注意力特征与通道注意力特征逐项求和得到双重注意力特征。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人浙江工业大学,其通讯地址为:310014 浙江省杭州市下城区潮王路18号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。