딥러닝을 이용한 청각장애인 위험방지 및 STT 서비스의 통합 플랫폼 구현

Implementation of Integrated Platform of Risk Prevention and STT Service for the Deaf Using Deep Learning
  • 정예진
  • 정윤아
  • 김세하
  • 김동회

초록

청각장애인은 사이렌 소리가 발생하거나 자동차 경적소리가 울려도 해당 소리의 발생을 감지하기 어렵다. 본 논문에서는 일상 생활 속 발생하는 위험 소리를 학습시킨 FCN 모델을 기반으로 청각장애인을 위한 통합 웹 플랫폼을 제시한다. 첫째, 제안하는 플랫폼을 통해 사용자의 주변에서 특정 소리가 발생했음을 파악한다면, 이전보다 사고에 신속하게 대처할 수 있다. 둘째, 플랫폼에서 제공되는음성-텍스트 변환 서비스를 바탕으로 수화를 알지 못하는 상대방과 원활한 의사소통이 가능하다. 마지막으로, 웹 크롤링을 통해 청각장애인을 위한 최신 이슈와 구직 정보 등 뉴스를 알려주는 서비스로 청각장애인이 무분별한 뉴스를 보기보다 필요한 정보를 추출하여 제공하므로 편리하게 정보를 얻을 수 있는 플랫폼을 제안한다. 실험 결과, MFCC를 추출하여 딥러닝으로 구현한 소리분류는 약 91.07%의 정확도를 보였다.

키워드

Artificial IntelligenceDeep LearningConvolution Neural NetworkPythonSound classificationWeb CrawlingWeb FrameworkSpeech-To-Text인공지능딥러닝합성곱 신경망파이썬소리 분류웹 크롤링웹 프레임워크음성-텍스트 변환
제목
딥러닝을 이용한 청각장애인 위험방지 및 STT 서비스의 통합 플랫폼 구현
제목 (타언어)
Implementation of Integrated Platform of Risk Prevention and STT Service for the Deaf Using Deep Learning
저자
정예진정윤아김세하김동회
DOI
10.9728/dcs.2022.23.8.1459
발행일
2022-08
유형
Y
저널명
디지털콘텐츠학회논문지
23
8
페이지
1459 ~ 1467