Chatbot puede explicar las aplicaciones y cómo acceden al hardware o los datos

Actualización: 9 de diciembre de 2023

Chatbot ya se han convertido en parte de nuestra vida cotidiana con su forma rápida e intuitiva de completar tareas como programar y encontrar información mediante conversaciones en lenguaje natural. Investigadores de la Universidad Aalto han aprovechado el poder de los chatbots para ayudar a los diseñadores y desarrolladores a desarrollar nuevas aplicaciones y permitir a los usuarios finales encontrar información sobre las aplicaciones en sus dispositivos.

El chatbot puede responder preguntas mostrando imágenes y capturas de pantalla de aplicaciones, o mediante frases de texto simples.

“Hey GUI elimina la necesidad de habilidades de codificación o experiencia técnica. Cualquiera puede usarlo para buscar información sobre, por ejemplo, cuál de mis aplicaciones solicita permiso para usar la cámara, o dónde está el botón de búsqueda en esta pantalla ”, dice el investigador postdoctoral de la Universidad Aalto.

Hallazgos importantes para los desarrolladores e investigadores de chatbots

Los diferentes tipos de aplicaciones e interfaces de usuario contienen una gran cantidad de información, que se puede utilizar para diferentes necesidades y tareas. En su estudio, los investigadores se propusieron encontrar las funciones de chatbot más deseables y cómo los usuarios tendrían conversaciones con ellos.

Se consideraron tres grupos objetivo en el experimento: diseñadores, desarrolladores de software y usuarios en general. Más de 100 diseñadores, desarrolladores y usuarios comunes respondieron a la encuesta.

Su objetivo es comprender bien qué capacidades y funciones diferentes tipos de usuarios encontrarían más beneficiosas al usar este nuevo tipo de chatbot, así como también cómo formularían preguntas, especialmente qué tipo de palabras y frases usarían. Este es un primer paso importante hacia el desarrollo de chatbots que pueden ayudar a los usuarios a encontrar información sobre aplicaciones mediante conversaciones simples.

Como resultado de la encuesta, se recopilaron y analizaron 21 características clave y más de 1300 de las preguntas más comunes formuladas por los usuarios para crear Hey GUI, lo que permite a los usuarios encontrar información dentro de las interfaces de usuario mediante conversaciones simples, basadas en las expresiones más frecuentes. recopilados en la encuesta.

Los diseñadores pueden inspirarse, por ejemplo, pidiendo a Hey GUI que busque buenos diseños de tiendas online. El chatbot responde con varias capturas de pantalla de aplicaciones existentes en el catálogo. Los desarrolladores de software podrían preguntarle a un chatbot qué códigos de color típicos se utilizan para los botones de inicio de sesión, y el chatbot responde con varias opciones.

En las preguntas de los usuarios ordinarios, se hizo especial hincapié en los asuntos relacionados con política de privacidad e información de accesibilidad, o para obtener ayuda sobre sus aplicaciones, como preguntar qué aplicaciones muestran mapas.