Chatbot pode explicar aplicativos e como eles acessam hardware ou dados

Atualização: 9 de dezembro de 2023

Chatbot já se tornaram parte de nossa vida cotidiana com sua maneira rápida e intuitiva de realizar tarefas como agendar e encontrar informações usando conversas em linguagem natural. Pesquisadores da Universidade Aalto aproveitaram agora o poder dos chatbots para ajudar designers e desenvolvedores a desenvolver novos aplicativos e permitir que os usuários finais encontrem informações sobre os aplicativos em seus dispositivos.

O chatbot pode responder a perguntas mostrando imagens e capturas de tela de aplicativos ou por meio de frases de texto simples.

“Hey GUI elimina a necessidade de habilidades de codificação ou conhecimento técnico. Qualquer pessoa pode usá-lo para buscar informações sobre, por exemplo, qual dos meus aplicativos está pedindo permissão para usar a câmera, ou onde está o botão de busca nesta tela ”, diz o pesquisador de pós-doutorado da Universidade Aalto.

Descobertas importantes para desenvolvedores e pesquisadores de chatbot

Diferentes tipos de aplicativos e interfaces de usuário contêm grandes quantidades de informações, que podem ser usadas para diferentes necessidades e tarefas. Em seu estudo, os pesquisadores decidiram encontrar os recursos do chatbot mais desejáveis ​​e como os usuários conversariam com eles.

Três grupos-alvo foram considerados no experimento: designers, desenvolvedores de software e usuários em geral. Mais de 100 designers, desenvolvedores e usuários comuns responderam à pesquisa.

O objetivo deles é obter um bom entendimento de quais recursos e funções diferentes tipos de usuários achariam mais benéficos ao usar esse novo tipo de chatbot, bem como como eles formulariam perguntas - especialmente que tipos de palavras e frases usariam. Este é um primeiro passo importante para o desenvolvimento de chatbots que podem ajudar os usuários a encontrar informações sobre aplicativos usando conversas simples.

Como resultado da pesquisa, 21 recursos principais e mais de 1300 das perguntas mais comuns apresentadas pelos usuários foram coletados e analisados ​​para criar o Hey GUI, permitindo que os usuários encontrem informações nas interfaces do usuário usando conversas simples, com base nas expressões mais frequentes coletados na pesquisa.

Os designers podem se inspirar, por exemplo, pedindo ao Hey GUI para encontrar bons designs de lojas online. O chatbot responde com várias capturas de tela de aplicativos existentes no catálogo. Os desenvolvedores de software podem perguntar a um chatbot quais códigos de cores típicos são usados ​​para botões de login, e o chatbot responde com várias opções.

Nas perguntas de usuários comuns, houve uma ênfase especial em questões relacionadas a política de privacidade e informações de acessibilidade ou obter ajuda sobre seus aplicativos, como perguntar quais aplicativos exibem mapas.