HearO
실내 청각 피로 해방을 위한 생활 보조 서비스
1. 프로젝트 개요
- 프로젝트명: HearO
- 주제: 집에서 발생하는 소음을 사용자에게 명확히 전달하여 생활을 돕는 서비스
- SW캠프 : 단국대 티맥스 아카데미 타바 6기
- 진행 기간: 2024년 9월 ~ 2024년 12월 (2개월 교육기간, 2개월 프로젝트 기간)
- 팀 구성 및 역할:
- 팀원: 총 6명
- 역할 분담:
- 프론트엔드: 1명
- 백엔드: 2명
- AI: 3명 (담당 파트)
2. 서비스 필요성
- 대상: 청각 장애인, 난청인, 노인
- 필요성:
- 보청기 사용자의 청각 피로 감소
- 청각장애인의 긴급 상황 대처
- 일상 소음을 텍스트와 진동으로 전달
- 43만 명의 국내 청각장애인을 포함한 넓은 대상층을 위한 필수 서비스
3. 주요 기능
- 주변 소음 분석 및 알림
- 전자제품 소리 감지 (세탁기, 전자레인지 등)
- 초인종 및 방문객 알림
- 긴급 상황 소음 감지 (화재 경보, 사이렌 등)
- 상황별 알림 전달
- 텍스트와 진동으로 사용자에게 전달
- STT를 통한 안내방송 내용 요약
4. 담당 파트 수행 업무
- 데이터 수집 및 전처리
- 소리 데이터 수집 및 레이블링
- 데이터 정제
- AI 모델 학습 및 기능 구현
- YAMNet 모델 선정 및 커스터마이징
- 다중 소음 분리 및 주요 소리 감지 기능 추가
- 모델 학습을 통해 소음 분류 정확도 향상
- STT 연동으로 안내방송 및 초인종 텍스트화
- 실시간 소음 알림 시스템 설계
- AI 연동
- FastAPI와 Docker를 통한 AI API 구축
5. 문제점과 해결
- 초기 기획 변경
- 초기 주제: 유적, 문화작품 재현 시뮬레이터
- 기술적 문제 발생으로 HearO 서비스로 전환
 |
 |
- 서비스 특성상 음성 데이터 부족
- 전자제품 구동 완료음 등 종류가 적거나 대량의 수집 데이터 부재
- 실제 사용자의 녹음 데이터 수집 및 잡음, 소음 등을 통한 데이터 증폭
- AI 모델 구현
- 소음 분류 정확도 문제 → 모델 튜닝으로 해결
- 복합 소음 분리 및 처리 기능 구현
6. 결과 및 성과
- 우수상 수상
- 청각장애인 대상 소음 분석 및 전달 솔루션 제공
- 프로젝트를 통해 AI이해도 향상 및 팀 협업 능력 강화
7. 서비스 결과물
- 서비스 구동화면
더보기
로그인 및 알림 |
알림 확인  |
알림 내역 확인 |
'Archive > project 후기' 카테고리의 다른 글
| [한화시스템 BEYOND SW 캠프 15기] 백엔드 프로젝트 - LinkUp (1) | 2025.04.19 |
|---|---|
| [한화시스템 BEYOND SW 캠프 15기] 기반기술 프로젝트 - 오퓨(OPU) (5) | 2025.02.17 |
| [Project] 단국산학아카데미 X 포투나 프로젝트 활동기 (2) | 2025.01.19 |
| [Develop project] 다회용 용기 사용 및 회수 서비스 (1) | 2025.01.19 |
| [Develop project] 기숙사 룸메이트 연결 서비스 제작 (0) | 2025.01.17 |
