首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

用于复杂应用GUI的自动化助理控制的压缩口头话语 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:谷歌有限责任公司

摘要:本公开涉及用于复杂应用GUI的自动化助理控制的压缩口头话语。本文阐述的实现方式涉及自动化助理,该自动化助理可以使用图形用户界面GUI内容的自然语言理解经由语音输入来控制GUI元素,以便解决不清楚并且允许压缩GUI语音输入请求。当用户正访问在显示界面处呈现各种GUI元素的应用时,自动化助理可以操作以处理对应于GUI元素的可操作数据。可操作数据可以被处理以便确定到自动化助理的GUI语音输入请求和在显示接口处呈现的GUI元素中的至少一个GUI元素之间的对应关系。当确定来自用户的特定口头话语对应于多个GUI元素时,可以在显示界面处呈现不清楚的指示,以便鼓励用户提供更具体的口头话语。

主权项:1.一种由一个或多个处理器实现的方法,所述方法包括:确定用户已经向能够经由计算设备访问的自动化助理提供了口头话语,其中,所述口头话语包括用于执行动作的一个或多个项,其中,所述口头话语中的所述一个或多个项不包括明确识别要被执行的所述动作的任何项;将所述口头话语中的所述一个或多个项与内容描述数据进行比较,所述内容描述数据由能够经由所述计算设备访问的一个或多个应用提供,其中,所述内容描述数据表征所述一个或多个应用的一个或多个GUI元素,其中,所述一个或多个GUI元素在经由所述计算设备的显示器被显示时,能够由所述用户进行交互,并且其中,所述内容描述数据不经由所述显示器被显示给所述用户;基于将所述口头话语中的所述一个或多个项与表征所述一个或多个应用的所述一个或多个GUI元素的所述内容描述数据进行比较,确定所述口头话语是针对所述一个或多个应用中的第一应用;以及响应于确定所述口头话语是针对所述第一应用:生成用于所述第一应用执行所述动作的应用输入数据;以及向所述第一应用提供所述应用输入数据,其中,向所述第一应用提供所述应用输入数据致使所述动作被所述第一应用执行。

全文数据:

权利要求:

百度查询: 谷歌有限责任公司 用于复杂应用GUI的自动化助理控制的压缩口头话语

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。