과제 배경
만든 이유
청각장애인이 놓치기 쉬운 생활 소리를 알아듣고, 중요한 소리만 골라 바로 알려 주는 착용형 장치가 필요했습니다.
직접 한 일
- 5인 팀에서 STT 음성 처리와 장치 간 통신을 주로 맡았습니다 (당시 역할 기록 기준).
- 마이크 입력 장치와 처리 보드 조합을 검토하고 Android 앱 연동을 도왔습니다.
결과
- 2024 창업경진대회 학장상 (팀 수상)과 전시
- 소리 → 음성 인식 → 중요도 판별 → 앱, 진동 알림 설계
- 헤드셋 안에 음성 입력과 처리 모듈을 넣은 실물 제작
동작 흐름
소리에서 알림까지
발표 패널에 제시한 소리 입력부터 알림까지의 설계 흐름입니다.
01
소리 입력
02
STT 변환
03
키워드 조회
04
중요도 분류
05
앱/진동 알림
- 생활 소리 입력 → 음성 인식(STT) → 키워드로 중요도 판별 → 앱, 진동 알림 순서로 동작을 설계했습니다.
- 헤드셋 안에 ReSpeaker 마이크 어레이와 Raspberry Pi Pico 계열 모듈을 넣어 실물을 만들었습니다.
- 전시 부스, 발표 패널, 실물과 충전 영상으로 당시 결과를 남겼습니다.
STT키워드 분류Raspberry Pi PicoAndroid장치 간 통신
설계 문서
알림 동작 정의
발표 패널의 설계 흐름을 정리한 문서 발췌이며 실행 코드는 아닙니다.
소리 → 알림 동작 정의
docs/03_system_design.md
input:
source: 생활 소리
device: 음성인식 모듈
processing:
- stt: 음성을 텍스트로 변환
- keyword_lookup: DB/keyword 기준으로 중요 정보 판별
- priority: 중요도에 따라 알림 조건 결정
output:
app: 판별 결과 전송
vibration: 사용자에게 즉시 알림직접 확인하기
코드와 자료
아래 링크에서 코드, 설계 문서, 실행 기록을 직접 확인할 수 있습니다.
맡은 범위
- 직접 맡은 범위: STT 음성 처리, 장치 간 통신, 앱 연동 보조.
- 팀 결과: 프로토타입 설계와 제작, 수상과 전시.
범위와 한계: 최종 통합 코드는 보존되지 않았습니다. 영상은 외형과 충전 장면이며, 소리부터 진동까지 전 과정을 보여 주지는 않습니다.