上海交通大学陈露获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉上海交通大学申请的专利人机交互方法、设备、存储介质及程序产品获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119356580B 。
龙图腾网通过国家知识产权局官网在2026-03-03发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202411414325.4,技术领域涉及:G06F3/0484;该发明授权人机交互方法、设备、存储介质及程序产品是由陈露;俞凯;朱梓臣设计研发完成,并于2024-10-11向国家知识产权局提交的专利申请。
本人机交互方法、设备、存储介质及程序产品在说明书摘要公布了:本申请提供一种人机交互方法、设备、存储介质及程序产品,涉及计算机技术领域,该方法包括:检测用户交互请求所指示的交互任务是否能够通过单个动作而完成;在确定用户交互任务无法通过单个动作而完成的情况下,检索与交互任务相匹配的任务响应记忆数据;基于任务响应记忆数据,将交互任务分割成子任务集;基于任务响应记忆数据,评估各个决策动作针对子任务集中相应子任务的预期完成结果;在确定各个预期完成结果均为成功的情况下,根据各个决策动作确定针对屏幕控制器的交互操作路径。由此,通过分割任务并进行逐步执行,大大增强了手机助手在面对复杂任务场景中的应对能力。
本发明授权人机交互方法、设备、存储介质及程序产品在权利要求书中公布了:1.一种人机交互方法,包括: 检测用户交互请求所指示的交互任务是否能够通过单个动作而完成; 在确定所述用户交互任务无法通过单个动作而完成的情况下,检索与所述交互任务相匹配的任务响应记忆数据;所述任务响应记忆数据包含用户互动记录和任务动作路径记录;其中,所述任务响应记忆数据基于历史交互任务构建为任务记忆、用户记忆和应用记忆;所述任务记忆按照树状层级结构组织任务节点与子任务节点,每个任务节点关联的任务动作路径记录用于表征针对所述任务执行的决策动作序列及各决策动作的执行结果,所述任务动作路径记录包括成功动作历史和失败动作历史以及针对失败动作的反思信息; 根据所述交互任务、环境、所述任务响应记忆数据和可执行的决策动作集合,生成任务分解提示;将所述任务分解提示输入至第一多模态大语言模型,以根据第一多模态大语言模型输出的子任务描述,将所述交互任务分割成子任务集;所述子任务集中的每个子任务分别用于指示相应的决策动作; 针对所述子任务集中的各个子任务,根据对应子任务、环境、所述任务响应记忆数据以及执行对应所述子任务的决策动作后的环境,生成任务评估提示,并将所述任务评估提示输入至第二多模态大语言模型,以在未实际执行所述决策动作的情况下评估各个所述决策动作针对对应子任务的预期完成结果; 检索与各决策动作所需触发的目标交互元素相匹配的应用交互记忆数据,所述应用交互记忆数据包括应用程序描述信息和交互元素执行记录;基于所述应用交互记忆数据、所述任务响应记忆数据以及可执行的交互操作集合,生成本地代理提示,并将所述本地代理提示输入至第三多模态大语言模型,以确定目标交互元素及对应交互操作;根据各个所述目标交互元素及对应交互操作规划针对屏幕控制器的交互操作路径,并由所述屏幕控制器基于所述交互操作路径执行多步屏幕交互操作。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人上海交通大学,其通讯地址为:200240 上海市闵行区东川路800号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励