플러스프로젝트 배경
[해결하려는 문제] 저시력 장애인은 대중교통 이용과 야외 이동 시 시각 정보를 제때 파악하지 못해 독립적인 일상생활에 큰 어려움을 겪습니다. [달성하고자 한 목표] - CameraX 기반 실시간 카메라 피드 처리 - OpenGL/GLSL 셰이더로 개인 맞춤 시각 보정 - PyTorch 모델로 버스 번호 인식 및 손가락 트래킹으로 사물 지정 - TTS 음성 안내로 소통 - 스마트폰 하나로 대중교
프로젝트 성과
스마트폰 하나로 대중교통·야외 이동 독립
별도 보조 기기 없이 스마트폰만으로 버스 번호 확인, 주변 사물 식별, 안전 보행을 수행할 수 있게 되어 저시력 사용자의 일상 독립을 회복했습니다.
핵심 기능
실시간 시각 보정 + AI 인식 + TTS 안내
CameraX로 실시간 카메라 피드를 받아 OpenGL/GLSL 셰이더로 시각 보정을 입히고, PyTorch 모델이 버스 번호를 인식하거나 손가락 트래킹으로 사물을 감지한 뒤 TTS로 안내합니다.
진행 단계
CameraX + GLSL 셰이더 + PyTorch + TTS 통합
2020.10.
CameraX 실시간 카메라 피드, OpenGL/GLSL 시각 보정 필터, PyTorch 버스 번호 인식, 손가락 트래킹 사물 감지, TTS 음성 안내를 하나의 앱으로 통합했습니다.
프로젝트 상세
[프로젝트 소개] 저시력 사용자가 버스 번호 확인, 주변 사물 식별, 안전한 보행을 스마트폰 카메라 하나로 해결할 수 있도록 설계한 Android 카메라 보조 앱입니다. [해결하려는 문제] 저시력 장애인은 대중교통 이용과 야외 이동 시 시각 정보를 제때 파악하지 못해 독립적인 일상생활에 큰 어려움을 겪습니다. [접근 방식] CameraX로 실시간 카메라 피드를 처리하고, OpenGL/GLSL
