플러스프로젝트 배경
(1) 문제점 CES 전시 환경에서 반도체 기술 설명은 전문성이 높아 일반 관람객이 이해하기 어려움 도슨트 인력만으로는 12개 부스를 동시에 커버하기 어렵고 설명 품질이 일정하지 않음 기존 키오스크는 터치 기반 단방향 정보 제공에 그쳐 관람객 몰입도가 낮음 (2) 프로젝트 목표 AI가 인간 도슨트처럼 자연스럽게 기술을 설명하고 전시 흐름에 참여하는 시스템 구현 STT·LLM·시각 매핑이 하나의
프로젝트 성과
STT 발화 인식 정확도 99.2% 달성
반도체 도메인 용어 특화 학습 및 반복 튜닝을 통해 사전 목표치 초과 달성
CES 현장 12대 5일 무오류 운영
단일 네트워크 환경에서 12대 동시 운영, 오류 발생 없이 전시 기간 전체 완주
앤어워드 2026 디지털 서비스 CONTENT 부문 Silver 수상
AI 코도슨트 개념과 멀티모달 전시 인터랙션 구조를 국내 주요 어워드에서 공식 인정
핵심 기능
음성 기반 실시간 LLM 응답 (AI 코도슨트)
관람객 발화를 STT로 인식→Gemini LLM이 응답 생성→음성·텍스트·비주얼 동시 출력. 0.2초 동기화
진행 단계
AI 컨설팅 및 구조 설계
2024.09.
LLM 협업 구조 세팅, STT 최적화 전략, 멀티모달 시스템 아키텍처 설계
프로젝트 상세
(1) 포트폴리오 소개 CES 2025 삼성반도체 전시관을 위해 기획·개발·운영한 음성 기반 LLM 스마트 키오스크입니다. Google Gemini LLM과 STT(음성인식)를 결합해 관람객의 발화를 실시간으로 인식하고, 대화형 응답과 시각 자료를 동시에 출력하는 멀티모달 AI 인터랙션 시스템입니다. 인간 도슨트와 AI가 협업하는 'AI 코도슨트(Co-Docent)' 개념으로 설계되었으며, CES 현장에서
