交互式WEB文档的自动导航

发明专利有效专利

申请号：
CN201980064051.1
IPC分类号：G06F40/166
申请日期：
2019-09-27
申请人：
谷歌有限责任公司

基础信息

权利要求

说明书

PDF全文

法律信息

引证文献

著录项信息

专利名称	交互式WEB文档的自动导航
申请号	CN201980064051.1	申请日期	2019-09-27
法律状态	实质审查	申报国家	中国
公开/公告日	2021-05-07	公开/公告号	CN112771530A
优先权	暂无	优先权号	暂无
主分类号	G06F40/166	IPC分类号	G;0;6;F;4;0;/;1;6;6查看分类表>
申请人	谷歌有限责任公司	申请人地址	美国加利福尼亚州变更专利地址、主体等相关变化，请及时变更，防止失效
权利人	谷歌有限责任公司	当前权利人	谷歌有限责任公司
发明人	亚历山德拉·福斯特;迪莱克·哈卡尼-图尔;伊泽丁·古尔;乌尔里希·吕克特
代理机构	中原信达知识产权代理有限责任公司	代理人	李宝泉;任庆威

摘要

本公开通常涉及用于学习自动地导航交互式web文档和/或网站的方法、装置和计算机可读介质(暂时性和非暂时性)。更特别地，各种方法被提出用于训练各种深Q网络(DQN)代理，以在具有稀疏奖励以及大状态和动作空间的有挑战性的web导航环境中执行与包括分层强化学习的强化学习相关联的各种任务。这些代理包括能够使用学习值函数来自动地浏览交互式web文档的web导航代理，以及在本文中称为“元训练器”的训练代理，该训练代理能够被训练来生成合成训练示例。当专家演示可用时，可以实现本文描述的一些方法。当专家演示不可用时，可以实现本文描述的其他方法。在任何一种情况下，可以使用密集的基于势能的奖励来扩增训练。

序号	公开(公告)号	公开(公告)日	申请日	专利名称	申请人
该专利没有引用任何外部专利数据！

序号	公开(公告)号	公开(公告)日	申请日	专利名称	申请人
该专利没有被任何外部专利所引用！

我浏览过的专利

专利服务由北京酷爱智慧知识产权代理公司提供