首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

用于复杂应用GUI的自动化助理控制的压缩口头话语 

申请/专利权人:谷歌有限责任公司

申请日:2019-08-12

公开(公告)日:2024-05-17

公开(公告)号:CN114174972B

主分类号:G06F3/04883

分类号:G06F3/04883;G06F3/0482;G06F3/04847;G06F3/16;G10L15/22

优先权:["20190719 US 62/876,323"]

专利状态码:有效-授权

法律状态:2024.05.17#授权;2022.03.29#实质审查的生效;2022.03.11#公开

摘要:本文阐述的实现方式涉及自动化助理,该自动化助理可以使用图形用户界面GUI内容的自然语言理解经由语音输入来控制GUI元素,以便解决不清楚并且允许压缩GUI语音输入请求。当用户正访问在显示界面处呈现各种GUI元素的应用时,自动化助理可以操作以处理对应于GUI元素的可操作数据。可操作数据可以被处理以便确定到自动化助理的GUI语音输入请求和在显示接口处呈现的GUI元素中的至少一个GUI元素之间的对应关系。当确定来自用户的特定口头话语对应于多个GUI元素时,可以在显示界面处呈现不清楚的指示,以便鼓励用户提供更具体的口头话语。

主权项:1.一种由一个或多个处理器实现的方法,所述方法包括:确定用户已经向计算设备提供了口头话语,其中,当在所述计算设备的显示面板处呈现应用图形用户界面GUI的同时,提供所述口头话语,以及其中,所述计算设备提供对经由口头自然语言输入能够控制的自动化助理的访问;基于接收到所述口头话语,标识由正在所述显示面板处呈现所述应用GUI的应用提供的内容描述数据,其中,所述内容描述数据从所述应用GUI中省略但是表征一个或多个GUI元素,所述一个或多个GUI元素:在所述应用GUI处被呈现并且能够由所述用户经由一个或多个输入手势交互以向所述应用提供输入;基于所述内容描述数据和所述口头话语,确定所述口头话语的自然语言内容是否对应于由所述内容描述数据表征的所述一个或多个GUI元素中的至少一个GUI元素;以及当所述自然语言内容对应于所述至少一个GUI元素中的特定GUI元素时:基于与所述特定GUI元素对应的所述自然语言内容,生成与所述口头话语的所述自然语言内容一致的输入数据。

全文数据:

权利要求:

百度查询: 谷歌有限责任公司 用于复杂应用GUI的自动化助理控制的压缩口头话语

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。