챗봇은 앱 및 하드웨어 또는 데이터에 액세스하는 방법을 설명 할 수 있습니다.

업데이트: 9년 2023월 XNUMX일

chatbot 자연어 대화를 사용하여 일정을 계획하고 정보를 찾는 등의 작업을 빠르고 직관적으로 완료하는 방식으로 이미 우리 일상 생활의 일부가 되었습니다. Aalto University의 연구원들은 이제 챗봇의 힘을 활용하여 디자이너와 개발자가 새로운 앱을 개발하고 최종 사용자가 자신의 기기에서 앱에 대한 정보를 찾을 수 있도록 지원합니다.

챗봇은 앱의 이미지와 스크린 샷을 표시하거나 간단한 텍스트 구문을 통해 질문에 답할 수 있습니다.

“Hey GUI를 사용하면 코딩 기술이나 전문 지식이 필요하지 않습니다. 예를 들어, 내 앱 중 어떤 앱이 카메라 사용 권한을 요청하는지 또는이 화면의 검색 버튼이 어디에 있는지에 대한 정보를 검색하는 데 누구나 사용할 수 있습니다. "라고 Aalto University의 박사후 연구원은 말합니다.

챗봇 개발자 및 연구원을위한 중요한 결과

다양한 종류의 애플리케이션과 사용자 인터페이스에는 다양한 요구와 작업에 사용할 수있는 방대한 양의 정보가 포함되어 있습니다. 그들의 연구에서 연구원들은 가장 바람직한 챗봇 기능과 사용자가 그들과 대화하는 방법을 찾기 시작했습니다.

실험에서는 디자이너, 소프트웨어 개발자 및 일반 사용자의 세 가지 대상 그룹을 고려했습니다. 100 명 이상의 디자이너, 개발자 및 일반 사용자가 설문 조사에 응답했습니다.

그들의 목표는이 새로운 유형의 챗봇을 사용할 때 다양한 유형의 사용자가 가장 유익한 기능과 기능을 잘 이해하고 질문을 공식화하는 방법, 특히 어떤 종류의 단어와 구문을 사용할 것인지를 잘 이해하는 것입니다. 이것은 사용자가 간단한 대화를 사용하여 앱에 대한 정보를 찾는 데 도움이되는 챗봇을 개발하기위한 중요한 첫 단계입니다.

설문 조사 결과 21 가지 주요 기능과 사용자가 제기 한 가장 일반적인 질문 1300 개 이상을 수집 및 분석하여 Hey GUI를 생성하여 사용자가 가장 빈번한 표현을 기반으로 간단한 대화를 사용하여 사용자 인터페이스 내에서 정보를 찾을 수 있도록합니다. 설문 조사에서 수집되었습니다.

예를 들어 디자이너는 Hey GUI에 좋은 온라인 상점 디자인을 찾도록 요청하여 영감을 얻을 수 있습니다. 챗봇은 카탈로그에있는 기존 앱의 여러 스크린 샷으로 응답합니다. 소프트웨어 개발자는 챗봇에게 로그인 버튼에 사용되는 일반적인 색상 코드가 무엇인지 물어볼 수 있으며 챗봇은 여러 옵션으로 응답합니다.

일반 사용자의 질문에는 다음과 관련된 문제가 특별히 강조되었습니다. 개인 정보 보호 접근성 정보를 확인하거나지도를 표시하는 앱을 묻는 등 앱에 대한 도움을받을 수 있습니다.