"다함노트"
"다함노트"
청각장애인을 위한 통합환경(건청, 농아인이 같이 강연을 듣거나 회의를 하는 환경)에서 사용할 수 있는 플랫폼으로
강연 및 수업을 진행하는 강연자 앱과 강연 및 수업에 참여하는 청각장애인 앱이 있습니다.
다함노트 소개
"다함노트"는 강연자 앱과 청각 장애인 앱 간 일대 다 블루투스 통신을 기반으로 동작합니다.
강연자 앱에서 음성 인식한 강연내용을 다수의 청각장애인 앱에 전달하고
질문이 사항이 있을 때는 청각장애인 앱에서 텍스트로 질문을 전달하고,
필요할 경우 강연자 앱에서 전달받은 질문을 음성변환시켜 들을 수 있습니다.
다함노트는 강연회에 참여하고자 하는 청각장애인의 불편함을 해소하고자 만들어졌습니다.
다함노트를 이용하면 복잡한 절차 없이 강연자와 청각장애인 모두 기존 기기만으로도 통역을 지원받을 수 있습니다.
다함노트는 강연 뿐만 아니라 다양한 상황에서 사용 가능합니다.
기존의 오프라인 현장 : 소규모 회의, 소규모 강연(강의), 대규모 강연(강의) 등
온라인 학습 상황 : 유튜브 강연(강의), 비대면 수업(강의) 등
다함노트의 특징
1. 건청인과 최대 7명의 청각장애인이 오프라인 강연에 다함께 참여 가능
2. 청각장애인과 건청인의 질문이 상호 전달 가능
3. 청각장애인은 수업을 저장하여 복습이 가능한 노트처럼 사용 가능
청각장애인 앱
오프라인 강연(회의) 기능
오프라인 현장에서 강연을 듣고 질문 가능
온라인 강연 기능
온라인 영상 콘텐츠의 음성인식 가능
강연(회의) 저장
들었던 내용을 보관 가능
강연자 앱
연결 관리 기능
청각장애인에게 개인메시지 전송 및 퇴장 관리
강연(회의) 진행 기능
음성인식을 통한 강연(회의) 내용 전달
질문 관리 기능
청각장애인에게 전달받은 질문을 메시지로 다른 청각장애인들에게 전달 및 음성합성을 통해 스피커로 건청인들에게 전달
다함노트 구현 기술
Android Bluetooth Socket, BluetoothServerSocket 라이브러리를 사용한 1:N 멀티 블루투스 통신
Android SpeechRecognizer를 이용한 음성인식과 TextToSpeech 라이브러리를 이용한 음성합성 기술
Android Room DataBase 라이브러리를 이용한 DB 저장