聊天机器人可以解释应用程序以及它们如何访问硬件或数据

聊天机器人已经成为我们日常生活的一部分，它们可以用自然语言对话快速、直观地完成任务，比如安排日程和查找信息。阿尔托大学(Aalto University)的研究人员现在利用聊天机器人的力量，帮助设计师和开发者开发新的应用程序，并允许终端用户在他们的设备上找到应用程序上的信息。

聊天机器人“Hey GU”将于7月1日在ACM交互式系统设计2021年会上亮相，它可以通过展示应用程序的图片和截图，或通过简单的文本短语回答问题。

“Hey GUI消除了对编码技能或技术专长的需求。任何人都可以用它来搜索信息，例如，我的哪个应用程序正在申请使用摄像头的许可，或者屏幕上的搜索按钮在哪里，”阿尔托大学的博士后研究员卡什亚普·托迪说。

这是聊天机器人开发者和研究者的重要发现

不同类型的应用程序和用户界面包含大量的信息，这些信息可以用于不同的需求和任务。在他们的研究中，研究人员开始寻找最受欢迎的聊天机器人功能，以及用户将如何与它们进行对话。

实验中考虑了三个目标群体:设计师、软件开发人员和普通用户。超过100名设计师、开发人员和普通用户参与了调查。

“我们的目标是更好地了解不同类型的用户在使用这种新型聊天机器人时，什么功能和功能最有益，以及他们将如何组织问题——特别是他们将使用什么类型的单词和短语。”这是开发聊天机器人的重要第一步，它可以帮助用户通过简单的对话找到有关应用程序的信息。”Kashyap说。

由于调查,21个关键特性和超过1300用户提出的最常见的问题收集和分析创建GUI嘿,允许用户使用简单的对话在用户界面中找到想要的信息,根据调查收集的最常见的表情。

设计师可以从中获得灵感，比如，让Hey GUI找到好的网上商店设计。聊天机器人会从目录中已有的应用程序中截取一些屏幕截图。软件开发人员可以询问聊天机器人登录按钮的典型颜色代码，聊天机器人就会给出几个选项。”Kashyap补充道。

在来自普通用户的问题中，他们特别强调了隐私和可访问性信息的相关问题，或者关于他们的应用程序获得帮助，比如询问哪些应用程序显示地图。