메뉴 건너뛰기

사회적약자 해결완료

시각장애인을 위한 캔음료 인식 및 음성안내 앱

해결 완료
안정현
유튜브에서 시각 장애인이 캔 음료를 고르는 영상을 보며 모든 캔의 모양이 똑같고, 캔에 있는 점자로도 구분하기가 어려워 많은 시각장애인 분들이 불편을 겪는다는 사실을 알게 되었습니다. 이때 object detectin AI를 활용한다면 시각장애인 분들에게 도움을 줄 수 있을 것이라는 생각을 하게 되어 프로젝트를 시작하게 되었습니다. YCSI는 애플리케이션 내에서 캔 음료의 종류를 음성으로 안내하여 시각장애인 분들이 캔 음료를 선택할 수 있도록 보조하는 애플리케이션을 개발하는 프로젝트입니다. 애플리케이션을 실행시킨 후 캔 음료를 카메라에 나오게 들고 talk back이나 voice over를 활용하여 음료 인식 버튼을 누르면 object detection AI에 인식된 캔 음료의 이름을 소리로 안내합니다.

음료를 구매할 때 만으로 제한되지 않고 언제 어디서든 집에서도 음료수를 고를 때 자유롭게 사용할 수 있습니다.

공개SW대회 목적에 맞게 현재는 캔 음료로 한정되어 있지만, 학습 모델과 코드 몇 줄만 수정하면 캔 이 아닌 다른 물체도 인식하여 구분할 수 있는 확장성을 가지고 있습니다.
- 시각 장애인 분들을 대상으로 테스트를 진행하여 개선점을 찾은 후 보완하여 10월 중, 애플리케이션을 출시할 계획입니다.

- 인식 가능한 캔의 수를 점진적으로 늘려나갈 것입니다.

- iOS에서 사용할 수 있는 애플리케이션을 개발하여 OS에 관계없이 애플리케이션을 사용할 수 있도록 할 것입니다.

- object detection 애플리케이션 플랫폼으로써 활용할 때 더욱 간편하게, 다양하게 애플리케이션을 구성할 수 있도록 다듬어갈 것입니다.

- 오픈SW대회 목적에 맞도록 많은 분들이 보고 참고하고, 이용, 수정할 수 있도록 코드를 간단히 하고, 최적화 및 주석을 추가할 예정입니다.
닫기