"다함노트"

청각장애인을 위한 통합환경(건청, 농아인이 같이 강연을 듣거나 회의를 하는 환경)에서 사용할 수 있는 플랫폼으로

강연 및 수업을 진행하는 강연자 앱과 강연 및 수업에 참여하는 청각장애인 앱이 있습니다.

  • 다함노트 소개

"다함노트"는 강연자 앱과 청각 장애인 앱 간 일대 다 블루투스 통신을 기반으로 동작합니다.

강연자 앱에서 음성 인식한 강연내용을 다수의 청각장애인 앱에 전달하고
질문이 사항이 있을 때는 청각장애인 앱에서 텍스트로 질문을 전달하고,
필요할 경우 강연자 앱에서 전달받은 질문을 음성변환시켜 들을 수 있습니다.


왜 필요한가요?

다함노트는 강연회에 참여하고자 하는 청각장애인의 불편함을 해소하고자 만들어졌습니다.
다함노트를 이용하면 복잡한 절차 없이 강연자와 청각장애인 모두 기존 기기만으로도 통역을 지원받을 수 있습니다.

언제 사용 가능한가요?

다함노트는 강연 뿐만 아니라 다양한 상황에서 사용 가능합니다.

  • 기존의 오프라인 현장 : 소규모 회의, 소규모 강연(강의), 대규모 강연(강의) 등

  • 온라인 학습 상황 : 유튜브 강연(강의), 비대면 수업(강의) 등


다함노트의 특징은 뭔가요?

  • 다함노트의 특징

    1. 건청인과 최대 7명의 청각장애인이 오프라인 강연에 다함께 참여 가능
    2. 청각장애인과 건청인의 질문이 상호 전달 가능
    3. 청각장애인은 수업을 저장하여 복습이 가능한 노트처럼 사용 가능

어떤 기능이 있나요?

  • 청각장애인 앱

  • 오프라인 강연(회의) 기능
    오프라인 현장에서 강연을 듣고 질문 가능

  • 온라인 강연 기능
    온라인 영상 콘텐츠의 음성인식 가능

  • 강연(회의) 저장
    들었던 내용을 보관 가능

  • 강연자 앱

  • 연결 관리 기능
    청각장애인에게 개인메시지 전송 및 퇴장 관리

  • 강연(회의) 진행 기능
    음성인식을 통한 강연(회의) 내용 전달

  • 질문 관리 기능
    청각장애인에게 전달받은 질문을 메시지로 다른 청각장애인들에게 전달 및 음성합성을 통해 스피커로 건청인들에게 전달

어떤 기술을 이용해 만들어졌나요?

다함노트 구현 기술

  • Android Bluetooth Socket, BluetoothServerSocket 라이브러리를 사용한 1:N 멀티 블루투스 통신

  • Android SpeechRecognizer를 이용한 음성인식과 TextToSpeech 라이브러리를 이용한 음성합성 기술

  • Android Room DataBase 라이브러리를 이용한 DB 저장