1. 문제점
현장에서 기존 키오스크는 다음과 같은 불편함이 존재함:
1) 노약자가 작은 글씨·복잡한 버튼 구조와 사용방법 때문에 사용하기 어려움
2) 시각장애인, 청각장애인은 주문하기 어려움
3) 외국인이 언어 장벽으로 인해 주문 단계에서 혼동을 겪음
4) UI가 고정되어 있어 개인별 상황이나 사용 능력에 맞춘 맞춤형 안내 부족
5) 도움 인력이 없는 시간대에 줄서기·대기 시간 증가

전반적으로 **사용자의 디지털 접근성(Digital Accessibility)**을 충분히 고려하지 못함
이로 인해 주문 지연, 사용자 불만, 매장 운영 비효율 등의 문제가 발생함.

2. 프로젝트 목표
AI 기반 음성/이미지 인식·다국어 대응을 통해
노약자·외국인도 쉽게 사용할 수 있는 키오스크 제작
음성 안내와 대화형 인터페이스로 버튼 조작 없이도 주문 가능하도록 편의성 향상
( ※ 기존 버튼형 UX가 편한 사람은 버튼으로 진행 )
주문 과정의 난이도를 줄여 전반적인 고객 경험 개선과 매장 효율성 증가

3. 주안점(핵심 포인트 / Key Focus)
AI 대화형 주문 기능: 자연어로 메뉴 추천, 주문, 옵션 변경 가능
자동 언어 감지 및 다국어 지원: 외국인 접근성을 높이기 위한 즉시 번역 인터페이스
카메라 기반 사용자 유형 추정(선택적)
음성 안내/읽어주기 기능(TTS): 시각적 정보만으로 어려운 사용자 지원
UX 단순화: 최소 터치, 단계 수 축소, 명확한 피드백 구조
매장 운영 효율 개선: 주문 속도 향상, 직원 도움 최소화

본 프로젝트는 장애인, 노약자, 디지털 취약계층을 포함한 누구나 쉽게 이용할 수 있는 사용자 친화형 인공지능 키오스크 솔루션을 개발하기 위해 진행되었습니다.

기존 키오스크가 갖는 작은 UI 구성, 복잡한 조작 방식, 언어 장벽 등의 문제를 해소하고자, 음성인식(ASR), 음성합성(TTS), 대규모 언어모델(LLM) 기술을 통합하여 대화형 주문 환경을 구현하였습니다.

사용자는 버튼 조작이 익숙하지 않더라도
자연어 기반의 음성 대화만으로 메뉴 탐색, 주문, 옵션 선택, 안내 서비스를 이용하실 수 있습니다.

또한 시스템은 실시간 다국어 대응 기능을 갖추고 있어, 외국인 고객도 별도 설정 없이 자국어로 안내를 제공받을 수 있습니다.

특히 본 솔루션은 인터넷 연결이 원활하지 않은 환경에서도 안정적으로 운영될 수 있도록,
ChatGPT 기반 온라인 모드뿐만 아니라 로컬 환경에서도 동작 가능한 LLM 및 음성인식 엔진을 개발 및 탑재하였습니다.

이를 통해 네트워크 제약이 있는 매장에서도 오프라인 대화형 주문 시스템을 구현할 수 있습니다.

주문 기능 외에도
- 메뉴 추천
- 매장 및 시설 안내
- 결제 방식 안내
- 외국인 대상 다국어 관광·편의 안내 등 다양한 부가 안내 서비스를 포함하여 실사용 환경의 편의성과 확장성을 높였습니다.

본 프로젝트는 기술 접근성과 사용자 편의성을 동시에 충족하는 것을 목표로 하였으며, 누구나 쉽게 접근 가능한 차세대 키오스크 모델로서의 가능성을 제시하고 있습니다.