사회적약자
해결완료
시각장애인을 위한 유통기한 점자 번역 서비스
해결 완료
현재연
해결 과정
⚑ 시각장애인들이 필요하다면 언제든지 유통기한을 알 수 있도록 유통기한 점자 변환기를 개발
[개발 과정]
1. yolo를 이용하여 유통기한을 인식한다.
✔︎ 데이터셋 수집: 다양한 형태의 유통기한 사진을 직접 촬영
✔︎ Keras의 ImageDataGenerator 함수를 이용하여 데이터셋을 부풀림
✔︎ 수집한 모든 데이터셋의 유통기한 부분을 라벨링
✔︎ 해당 데이터셋으로 유통기한 학습
2. opencv를 활용하여 이미지 전처리
✔︎ 흑백 처리 -> GaussianBlur -> adaptiveThreshold -> dilate
3. 가공된 이미지를 pytesseract를 이용하여 유통기한 추출
[실행 과정]
1. 유통기한을 알고자 하는 물건을 돌려가며 카메라에 보여준다.
2. 물건을 돌리는 도중 카메라에 유통기한이 잡히면 그 부분을 잘라내서 유통기한을 추출한다.
3. 추출된 유통기한을 적절한 변환을 통해 서버에 전달한다.
4. 서버에 전달된 유통기한을 크롤링하여 아두이노에 전달한다.
5. 전달받은 유통기한을 서보모터를 이용하여 점자로 나타낸다.
[오픈 소스]
➤ yolo, pytesseract
⚑ 시각장애인들이 필요하다면 언제든지 유통기한을 알 수 있도록 유통기한 점자 변환기를 개발
[개발 과정]
1. yolo를 이용하여 유통기한을 인식한다.
✔︎ 데이터셋 수집: 다양한 형태의 유통기한 사진을 직접 촬영
✔︎ Keras의 ImageDataGenerator 함수를 이용하여 데이터셋을 부풀림
✔︎ 수집한 모든 데이터셋의 유통기한 부분을 라벨링
✔︎ 해당 데이터셋으로 유통기한 학습
2. opencv를 활용하여 이미지 전처리
✔︎ 흑백 처리 -> GaussianBlur -> adaptiveThreshold -> dilate
3. 가공된 이미지를 pytesseract를 이용하여 유통기한 추출
[실행 과정]
1. 유통기한을 알고자 하는 물건을 돌려가며 카메라에 보여준다.
2. 물건을 돌리는 도중 카메라에 유통기한이 잡히면 그 부분을 잘라내서 유통기한을 추출한다.
3. 추출된 유통기한을 적절한 변환을 통해 서버에 전달한다.
4. 서버에 전달된 유통기한을 크롤링하여 아두이노에 전달한다.
5. 전달받은 유통기한을 서보모터를 이용하여 점자로 나타낸다.
[오픈 소스]
➤ yolo, pytesseract
1. 점자 표출 기계 보완
: 점자 표출 기계의 부품과 외관을 좀 더 견고하고 일상생활에서 사용 가능하도록 제작함.
카메라를 부착하여 기계 하나만으로 점자를 인식할 수 있도록 간편성을 보완함.
2. 인식 기술 보완
: 더욱 다양한 유통기한 표기법을 인식할 수 있도록 머신러닝을 통해 보완함.
: 점자 표출 기계의 부품과 외관을 좀 더 견고하고 일상생활에서 사용 가능하도록 제작함.
카메라를 부착하여 기계 하나만으로 점자를 인식할 수 있도록 간편성을 보완함.
2. 인식 기술 보완
: 더욱 다양한 유통기한 표기법을 인식할 수 있도록 머신러닝을 통해 보완함.
목록보기