[2023 SW페스티벌]실시간 스트리밍 동영상에 대한 자막생성 & 송출 플랫폼

작성자 신현서
학과 또는 소속(회사명) 소프트웨어융합학과
조회수 22
평가(좋아요)수 11
댓글수 4
실시간 동영상인데 자막을?


1. 프로젝트 주제
실시간 스트림 동영상에 대한 자막 생성 개선 & 송출 플랫폼


2. 개발동기
도서관에서, 사무실에서, 지하철 등등에서 소리를 듣지 못할 때 당신의 영상 이해도를 높여드립니다.

자막이 있는 영상의 이해도가 그렇지 않은 영상의 이해도에 비해 33% 높게 나타나는 연구가 있다. 그러나 대부분의 일반 영상은 자막을 제공하는 데에 반해 실시간 스트림 동영상은 일반적으로 자막을 제공하지 않는다.
이미 시장에 나와있는 서비스들은 딜레이 and 높지 않은 정확도를 보여주기에 이 두가지 문제점을 개선한 자막 생성, 송출 플랫폼을 개발중에 있다.


3. 기능
영상링크를 입력시 이를 가공하여 자막과 함께 송출한다.


4. 사용언어 및 프레임워크
Backend : FLASK (Python)
분석모델 : Speech_Recognition (Python)
영상재생 : Video.js (Javascript)
웹페이지 : HTML, CSS

동영상 링크

https://youtu.be/SBdU4yiCfk4

[2023 SW페스티벌]실시간 스트리밍 동영상에 대한 자막생성 & 송출 플랫폼

조회수 22
평가(좋아요)수 11
댓글수 4
게시 : 2023년 11월 21일
  • 박선우 2023-11-22 01:17
    라이브 영상을 볼때 자막이 있으면 좋을것 같다고 생각만 했는데 정말 좋은 아이디어 인것 같습니다
  • 최인열 2023-11-22 03:59
    GPU inference만 된다면 OpenAI의 Whisper를 태워도 좋을 것 같네요 ^^

    https://github.com/ggerganov/whisper.cpp

    위 레포를 참고해보세요 ^^
  • 신현서 2023-11-22 10:07
    조언 감사합니다. 더 발전시켜볼 생각입니다.
  • 조민서 2023-11-22 11:00
    자막 서비스 넘 좋아요 굳굳 ~!!
신현서 소프트웨어융합학과

[2023 SW페스티벌]실시간 스트리밍 동영상에 대한 자막생성 & 송출 플랫폼

조회수 22
평가(좋아요)수 11
댓글수 4
게시 : 2023-11-21

Member

신현서, 김찬

Keyword

동영상, 실시간, 자막

  • 인공지능
  • 기타