チャットボットはアプリとアプリがハードウェアまたはデータにアクセスする方法を説明できます

更新日: 9 年 2023 月 XNUMX 日

チャットボット 自然言語での会話を使用してスケジュール設定や情報検索などのタスクを迅速かつ直感的に完了できるため、すでに私たちの日常生活の一部となっています。アアルト大学の研究者たちはチャットボットの力を利用して、デザイナーや開発者が新しいアプリを開発できるようにし、エンドユーザーが自分のデバイス上でアプリに関する情報を見つけられるようにしました。

チャットボットは、アプリの画像やスクリーンショットを表示するか、簡単なテキスト フレーズを通じて質問に答えることができます。

「GUI を使用すると、コーディング スキルや技術的な専門知識は必要ありません。 誰でもこれを使用して、たとえば、どのアプリがカメラの使用許可を求めているのか、この画面の検索ボタンはどこにあるのかなどの情報を検索できます」とアールト大学の博士研究員は述べています。

チャットボット開発者と研究者にとって重要な発見

さまざまな種類のアプリケーションやユーザー インターフェイスには、さまざまなニーズやタスクに使用できる膨大な量の情報が含まれています。 研究者らは研究の中で、最も望ましいチャットボット機能と、ユーザーがどのようにチャットボットと会話するかを見つけることに着手した。

実験では、デザイナー、ソフトウェア開発者、一般ユーザーの 100 つのターゲット グループが検討されました。 XNUMX 名を超えるデザイナー、開発者、一般ユーザーがアンケートに回答しました。

彼らの目標は、さまざまな種類のユーザーがこの新しいタイプのチャットボットを使用する際にどのような機能や機能が最も有益であると考えるのか、またユーザーがどのように質問を組み立てるのか、特にどのような種類の単語やフレーズを使用するのかをよく理解することです。 これは、ユーザーが簡単な会話を使用してアプリに関する情報を見つけられるようにするチャットボットの開発に向けた重要な第一歩です。

調査の結果、21 の主要な機能と、ユーザーから寄せられた 1300 以上の最も一般的な質問が収集および分析され、Hey GUI が作成されました。これにより、ユーザーは、最も頻繁に使用される表現に基づいて、簡単な会話を使用してユーザー インターフェイス内の情報を見つけることができます。アンケートで集めたもの。

デザイナーは、たとえば、Hey GUI に良いオンライン ショップ デザインを見つけるように依頼することで、インスピレーションを得ることができます。 チャットボットは、カタログ内の既存のアプリからのいくつかのスクリーンショットで応答します。 ソフトウェア開発者は、ログイン ボタンに使用される一般的なカラー コードをチャットボットに尋ねると、チャットボットはいくつかのオプションで応答します。

一般ユーザーからの質問では、特に次のような点が重視されました。 プライバシー アクセシビリティ情報や、どのアプリが地図を表示するかを尋ねるなど、アプリに関するヘルプを取得します。