1️⃣ 프로젝트 소개
시각 장애인의 웹 접근성을 위한 온라인 화상회의 플랫폼

2️⃣ 프로젝트 배경
코로나19 팬데믹 이후 비대면 실시간 화상회의 플랫폼의 이용이 급격히 증가하며, 교육과 회의의 많은 부분이 비대면으로 전환되었다. 시각장애인의 웹 접근성을 보장하기 위해 ZOOM, Google Meet와 같은 플랫폼들은 스크린 리더를 도입하였지만, 이는 시각 자료 공유를 위한 화면 공유 기능 활성화 시 적용되지 않는다. 따라서 본 프로젝트에서는 OCR(Optical Character Recognition) 기술을 활용하여 시각장애인이 공유된 화면에 대한 내용도 인지할 수 있도록 하는 온라인 화상회의 플랫폼을 개발하였다.

3️⃣ 적용 기술
1. WebRTC
- 브라우저 간 플러그인 없이 오디오, 비디오, 데이터 스트리밍을 실시간으로 지원하는 기술
2. TTS (Text-To-Speech)
- 텍스트를 음성으로 변환하는 기술
3. OCR (Optical Character Recognition)
- 이미지나 스캔된 문서에서 텍스트를 인식하고 디지털 데이터로 변환하는 기술

4️⃣ 개발 환경
- Front-end: TypeScript, Next.js, Tailwindcss
- Back-end: JavaScript, Node.js
- Library: OpenVidu

5️⃣ 주요 기능
1. 단축키 설정: 마우스 조작이 어려울 경우 단축키를 사용할 수 있다.
(회의 생성: 1, 회의 참가: 2, 공유 화면 읽기: ctrl+o, 회의 나가기: esc, 페이지 이동: enter, 뒤로가기: 왼쪽 화살표)

2. 카메라/마이크 설정: 권한 허용 후, 카메라와 마이크 상태를 확인하고 on/off 할 수 있다.

3. 회의 참여: SFU 통신을 통해 다수의 참여자끼리 화상 회의를 할 수 있다.

4. 공유 화면 읽기: 공유된 화면의 텍스트를 OCR로 인식한 후, TTS로 변환하여 음성으로 읽어준다.

6️⃣ 기대 효과
- 단축키 사용을 통해 화면을 쉽게 조작하여 복잡한 화면 전환이나 메뉴 탐색을 최소화하여 시각장애인 중심의 사용자 경험을 향상시킨다.
- 공유 화면의 시각적 정보를 텍스트 및 음성으로 변환하여 실시간으로 제공함으로써, 시각장애인이 비대면 환경에서 원활한 학습과 업무를 수행할 수 있다.