Чат-бот может объяснять приложениям и их доступ к оборудованию или данным

Обновление: 9 декабря 2023 г.

Chatbot уже стали частью нашей повседневной жизни благодаря быстрому и интуитивно понятному способу выполнения таких задач, как планирование и поиск информации, с помощью общения на естественном языке. Исследователи из Университета Аалто теперь используют возможности чат-ботов, чтобы помочь дизайнерам и разработчикам разрабатывать новые приложения и позволить конечным пользователям находить информацию о приложениях на своих устройствах.

Чат-бот может отвечать на вопросы, показывая изображения и скриншоты приложений или используя простые текстовые фразы.

«Привет, GUI устраняет необходимость в навыках программирования или технических знаниях. Любой желающий может использовать его для поиска информации, например, о том, какое из моих приложений запрашивает разрешение на использование камеры или где находится кнопка поиска на этом экране », - говорит постдокторант из Университета Аалто.

Важные выводы для разработчиков и исследователей чат-ботов

Различные типы приложений и пользовательских интерфейсов содержат огромное количество информации, которую можно использовать для различных нужд и задач. В своем исследовании исследователи намеревались найти наиболее желаемые функции чат-бота и то, как пользователи будут общаться с ними.

В эксперименте рассматривались три целевые группы: дизайнеры, разработчики программного обеспечения и обычные пользователи. На опрос ответили более 100 дизайнеров, разработчиков и обычных пользователей.

Их цель - получить хорошее представление о том, какие возможности и функции для разных типов пользователей будут наиболее полезными при использовании этого нового типа чат-бота, а также о том, как они будут формулировать вопросы, особенно какие слова и фразы они будут использовать. Это важный первый шаг на пути к разработке чат-ботов, которые могут помочь пользователям находить информацию о приложениях с помощью простых разговоров.

В результате опроса была собрана и проанализирована 21 ключевая функция и более 1300 наиболее распространенных вопросов, задаваемых пользователями, для создания Hey GUI, позволяющего пользователям находить информацию в пользовательских интерфейсах с помощью простых диалогов на основе наиболее часто встречающихся выражений. собраны в опросе.

Например, дизайнеры могут получить вдохновение, попросив Hey GUI найти хороший дизайн интернет-магазина. Чат-бот отвечает несколькими скриншотами из существующих приложений в каталоге. Разработчики программного обеспечения могут спросить чат-бота, какие типичные цветовые коды используются для кнопок входа в систему, и чат-бот ответит несколькими вариантами.

В вопросах обычных пользователей особое внимание было уделено вопросам, связанным с политикой конфиденциальности. информация о специальных возможностях или получение справки о своих приложениях, например вопрос о том, какие приложения отображают карты.