소개:
VR 독서 환경에서 사용자 경험을 개선하기 위한 효과적인 인터페이스 설계 및 개발을 목표로 한다. 텍스트를 정제하기 위한 전처리 과정을 거쳐 구문과 품사를 태깅 및 분석한 뒤, 언어 모델을 사용하여 텍스트를 요약 및 재구성하고, 이를 기반으로 오디오 효과를 묘사하는 프로세스를 구축하였다. 이후, Tango와 AudioLDM2와 같은 Text-to-Audio 모델을 활용해 오디오를 생성하고, 이를 사전에 구성된 VR 읽기 환경에 통합하였다. 나아가, 가상현실 환경에서 사용자의 시선 정보를 활용하여 텍스트에 적합한 오디오와 효과를 제공함으로써 몰입감과 효율성을 높이는 독서 인터페이스를 구현하였다. 이를 통해 VR 기반 디지털 독서의 가능성을 탐구하며, 직관적이고 자연스러운 독서 경험을 제공하고자 한다.