가상현실기술을 적용한 레트로 콘텐츠 개발

2-1 맞춤형 콘텐츠

본 연구에서는 많은 팬덤을 보유하고 있는 국내 최정상 걸그룹이자 한 시대의 걸그룹 아이콘으로 불리는, ‘소녀시대’로 선정함으로써 팬들과 지속적인 유대관계를 소녀시대증강현실콘텐츠로 직간접적으로 표현해보았다. 표 1. 은 소녀시대의 ‘소원을 말해봐’ 가사이다.

Table 1.

Tell Me Your Wish Part of the Lyrics

본 연구에서는 영상을 업로드 한 외국팬이 올린 뮤직비디오 리액션 영상을 통하여, ‘저기에 있고 싶어’라는 문구와 함께 그 팬의 심리를 기반으로 가상증강현실 세계를 통하여 소녀시대 뮤직비디오공간을 3차원 공간에서 직접 체험하고 그 공간을 통하여 ‘향수’를 자극할 수 있는 ‘감성 콘텐츠’를 기획하게 되었다. 또한 소원을 말해봐, 즉 소원을 들어주는 소녀시대가 가상증강 세계를 통하여 그 소원을 들어주는 대명사로 접목시켰으며, 가상세계에서만큼은 소녀시대의 뮤직비디오를 ‘체험’할 수 있는 ‘실감형 콘텐츠’를 제작하게 되었다.

4-1 소녀시대 VR콘텐츠 제작

소녀시대의 VR콘텐츠 제목인 인더뮤비(IN THE MV)는 ‘뮤직비디오 속으로 빠진다’의 의미를 내포하고 있다. 2D에 갇혀있는 뮤직비디오 장면을 제3의 세계인, 가상세계를 통하여 ‘뮤직비디오 안으로 끌어당긴다.’는 의미로 재해석하였다. 또 실제로 그러한 느낌을 더하기 위해서 소녀시대, 소녀시대 팬, 이상한나라의 앨리스, 향수를 키워드를 기반으로 총 4개의 씬 으로 전개되는 ‘옴니버스 식 구성’을 띄고 있다.

표 2.는 소녀시대 뮤직비디오 로직(MV Logic)을 보인다.

Table 2.

Girls' Generation Music Video(MV) Logic

표 2.은 소녀시대 VR콘텐츠를 함축적으로 간략히 정리하여 설명하기 위해서 만든 표이다. 소녀시대 VR콘텐츠를 제작하기 위해 여러 기획을 하였고, 모두가 공감할 수 있는 ‘소녀시대’ VR 콘텐츠로 재탄생하는 것에 대한 여러 시각으로 기획을 하였다. 또한, 이 콘텐츠를 시연하는 ‘20대 대학생’이 공감하는 콘텐츠로 구성할 것인가에 대한 문제가 매우 어려움이 있었다. 더 나아가서 이 콘텐츠가 유통이 된다면, 처음 타깃 이었던 소녀시대, 소녀시대 팬, 조금 더 확장해서 2010년대의 음악을 좋아했던 대중들이 이해를 하고 공감할 수 있는 콘텐츠를 제작이 가능할 것에 대한 확신이 있었다.

소녀시대 VR콘텐츠에서 가장 핵심이 되는 S#3 콘텐츠에서 영감을 얻어 그림 2. 와 같이 3D Max와 유니티 Terrain을 이용하여 배경을 디자인 하였다.

Fig. 2.

Girls' Generation VR content S#3

0708(그 여름)이 들어간 음반CD 도입부분에 소녀시대 VR 콘텐츠을 배치함으로써, 이 모든 배경의 시작은 이 뮤직비디오로 시작한다는 의미로 디자인했다. 또한 소원을 말해봐 /LoveGirls /소녀시대 Gee(Japan ver.MV)를 배치하였고, 그냥 있던 농구대 부분을 소녀시대의 Oh! 뮤직비디오에 접목시켰다. 또한 ‘별들의 도시를 의미하는’ LALALAND에서 따온 GGLAND(Girl's Generation)을 3D Text를 배치함으로써, ‘연예인’을 뜻하는 ‘별’을 의미하였다. LionHeart의 뮤직비디오 도입부에 등장한 기차를 배치하거나 인생의 여정을 상징하는 ‘길’과 소녀시대가 많은 사람들에게 등대역할을 했다는 의미로 등대를 배치했다.

여기에서 큰 차이를 더 두기 위해서 두 번째로 했던 일은, 바로 유튜브에 수없이 많이 업로드 되어 있는 ‘뮤직비디오 해석 영상’을 보는 것이다. 그 해석영상에서 알려준 오브젝트 의미를 하나하나 분석하여 필요한 요소들을 적절하게 배치하기 위해서 씬 을 더 추가하였다. 그래서 콘텐츠를 옴니버스 식 구성으로 제작하게 되었고, 또한 VR의 장점인 수동적 콘텐츠 수용자를 점점 끌어들여 능동적 수용자로 점점 바꾸기 위해서 선형적 스토리를 갖춘 소녀시대 VR콘텐츠를 제작하였다.

4-2 인터랙션 기법을 적용한 제작

본 연구에서 개발한 소녀시대 VR콘텐츠는 뮤직비디오 공간 속에 들어가서 직접 체험할 수 있는 인터랙션 가상현실 어플리케이션 기반인 콘텐츠이다. 기존의 스마트 폰 화면에서 손가락으로 터치하는 방식이 아닌 ‘자신이 보는 눈의 시각’으로 선택하는 방식이며 음악, 영상, 등과 같이 다양한 기능을 접목시킴으로써 재미를 주기 위한 요소들이 배치되어 있다. 또한, 소녀시대와 관련된 오브젝트와 ‘길’에 대한 키워드와 관련된 대상체를 배치함으로써 감성과 감동을 주기 위한 콘텐츠로 구성되어있다. 1, 2, 3, 4단계로 (본 논문에서는 영화를 의미하는 #S 으로 표시함. S#1, S#2, S#3, S#4)갈수록 콘텐츠를 체험하는 수용자를 점점 수동적인 상태에서 능동적인 상태로 즉, UX(UserExperience) 관점에서 다음 스테이지로 이동하게 할 미션을 주어 스스로 다음 스테이지에 넘어 가도록 하게해서 점점 콘텐츠에 빠지도록 유도하였다. 그래서 본 논문에서는 각 씬(#S)별로 해당 콘텐츠를 제작할 때 필요한 Script, 멀티미디어간의 결합(영상/음악), 최적화, 유니티 게임 엔진 및 3D max 등에 대해 기술하였다[4-7].

4-3 S#1-콘텐츠 티저 (Content Teaser)

그림 3은 S#1의 주요 기능 위주로 캡처한 화면이다. 첫 번째 장면은, 앞전에 보여드린 S#3에 모티브가 된 뮤직비디오 4개(LionHeart, Oh!, Gee, Love&Girls, 소원을 말해봐)의 티저 를 시간 초 단위로 등장하게끔 스크립트를 작성했다. 또한 세 번째 장면도 같은 방식으로 진행되며, 유니티 Asset Store에서 제공하는 파티클 시스템을 이용하여 문이 등장하게 스크립트를 작성한 뒤 파티클이 시행될 때에도 효과음이 함께 나오도록 스크립트를 작성하였다. 그리고 네 번째 장면처럼 S#2에서 설명드릴 ‘이상한 나라의 앨리스’에 나오는 ‘토끼’를 ‘빛’으로 소녀시대 그 여름 뮤직비디오에 나오는 ‘유리병’을 ‘문’으로 대체하였다. 그림 4는 그 당시 작성했던 스크립트의 일부이다. Invoke함수와 유니티 인터페이스를 활용하여 위의 해당 기능들이 콘텐츠 안에 실현 가능하게 만들었다.

Fig. 3.

S#1 Capture Main Features Screen (a)MV teaser video (b)10th Anniversary Intro Video (c)Door appears (d)Go to Door

Fig. 4.

Scripts using the Invoke function

그림 4는 스크립트 작성을 통해서 영상, 파티클, 문, 빛이 등장하며 마지막으로 Player(=실제 콘텐츠 수용자)가 자동적으로 문과 객체(Player)가 부딪히면서 다음 스테이지로 이동하게 된다. 그림 5는 S#1의 스토리보드 기획안이다. 소녀시대의 콘서트 음원에 맞춰서 처음은 VR도 생소하고 이 시스템 자체에도 생소할 수 있으니 ‘수동’이 아닌 ‘자동’으로 모든 것이 진행되게 스크립트를 구성하였고, S#1을 영화 티저나 뮤직비디오 티저와 같은 공간이라고 생각하면 된다. 여기에서 콘텐츠 수용자가 해야 할 임무가 있다면, 뮤직비디오가 나타날 때 스스로 시선 방향을 옮겨 해당 뮤직비디오가 등장하는 것을 봐야한다는 것이다. 시간 초 단위로 등장했다가 사라지니 못 볼 수 있는 게 함정이지만, 기획안의 내용 그대로 반영하였다. 이때 유니티 공간에서 영상을 추출하기 위해서 AVPro Video를 활용하여 그림 5과 함께 스크립트를 짜고 그림 6와 같이 오브젝트 추출을 위한 유니티 인터페이스를 구성하였다. 또한 스스로 Adobe사에서 After Effect를 통하여 소녀시대 intro영상을 직접 제작하여 해당 콘텐츠에 삽입시켰다.

Fig. 5.

S#1 Storyboard Plan

Fig. 6.

Unity interface for object extraction.

4-4 S#2-이상한 나라의 앨리스와 자아정체성

그림 7은 두 번째 뮤직비디오(MV) 스토리보드계획안이다.

Fig. 7.

S#2 Storyboard Plan

그림 7은 EXO의 <LOVE ME RIGHT>와 아이유의 <스물셋> 뮤직비디오의 컨셉 기반인 ‘이상한 나라의 앨리스’로 스토리보드 컨셉을 정하였다. 몽환적이고 신비로운 판타지느낌으로 유니티 Terrain으로 공간을 제작하고 LionHeart에 등장한 ‘사자’를 배치함으로써 직접 스스로 짠 대본을 Player와 사자가 대화를 주고 받는 영화식으로 연출시켰다.

왜 이상한 나라의 앨리스인가?

앞서 예시로 소개한 영상을 해석한 결과에 따른면 판타지를 넘어서 ‘자아정체성’으로 이상한 나라의 앨리스를 소재로 이용한다는 것을 알았다. 본 연구가 결과가 영향을 미칠 대상은 20대 대학생들이다.

진로, 취업 키워드를 뽑을 수 있고, 또한 앞으로의 고민인 ‘자아정체성’ 즉, 어디로 나아가야할지 가장 진로에 대해 고민하는 시기 ‘청춘’이다. 이때 방탄소년단의 ‘청춘’컨셉이 시작되는 해이기도 하고, 2018년부터 현재까지 많은 엔터테인먼트 노래 또는 뮤직비디오 컨셉이 ‘자아정체성’을 다루고 있다. 그래서 본 논문에서는 아이돌 주 타겟인 10~20대들이 자라서 10년 후인 20대~30대를 타겟으로 잡고 ‘자아정체성’ 스토리 기반을 ‘이상한 나라의 앨리스’로 선택하였다.

그리고 별들의 도시, ‘꿈과 현실의 괴리’를 가장 잘 표현한 영화 라라랜드의 OST, Audition의 일부분을 실제 본 논문에서 대본을 작성하였고, 한 청춘이 가고자 하는 ‘길’을 표현하고자 했다. 콘텐츠 자체에 ‘자아정체성, 길, 청춘’을 키워드를 뽑아내 특정한 팬들에게 공감을 끌어내기 위해 콘텐츠를 제작하고 기획했다.

그림 8와 표 3에서 보는 것 같이 직접 대본을 짠 대사들을 Adobe사의 Photoshop을 이용하여 말주머니 UI를 제작하였다. 소녀시대의 공식색깔인 ‘분홍’색은 Player의 속마음과 대사에 쓰이고, Lion Heart의 사자의 대사에는 사자의 고유색인 ‘노랑’으로 희망, 길에 대한 방향인 ‘빛’을 내포하고 있다. 그리고 #S2에서부터는 사용자의 시선에 따라 Player가 유니티 Terrain 공간에서 자유자재로 이동이 가능하며, UI에 있는 Skip버튼(클릭시 #S3로 이동)으로 가거나 다음 대사를 볼 수 있는 ‘>>’아이콘을 선택하도록 이벤트처리와 스크립트를 작성하였다. 사용자는 이제 수동적 상태로는 콘텐츠 진행이 불가능하기 때문에 이 #S2부터는 능동적으로 콘텐츠에 임해야 한다. 그리고 사자와 Player 대사 중간에 나오는 LionHeart(남자ver)음악이 나오게 스크립트를 작성하여 유저가 대사를 보다가도 지루하지 않게 재미요소를 더했다.

Fig. 8.

S#2 Main Features Capture Screen (a)Lala Land Audition Citation (b) Implementation of S2 Terrain Place (c) LionHeart (d)Heroine Conversation UI

Table 3.

S#2 Scripts

4-5 3D 뮤직비디오 촬영장 제작

실제 뮤직비디오 촬영지 또는 오브젝트를 3D Max툴과 Adobe Photoshop을 이용하여 이미지를 Mapping하거나 모델링을 하여 유니티 Terrain과 함께 3D공간으로 재구현했다. UI는 사이트에 업로드 된 앨범소개를 기반으로 제작함으로써, Player가 각 구간에 들어가게 된다면 각 구간의 앨범 Title곡이 재생이 되도록 스크립트를 작성하였다.

그리고 여기 #S3에서도 Player가 보이는 시각에 따라 객체가 움직이며, 자동차와 기차에 애니메이션을 추가하여 자동 무한반복이기 때문에 정적인 느낌이 아닌 생동감 있는 분위기로 연출시켰다. 또한 산과 마을 사이에 물이 흘러가는 강물을 배치하여 생동감 분위기를 만들었다. 그리고 앞서 말했던 등대=소녀시대 또는 소녀시대 음악이며, GGLAND=소녀시대만의공간이자, 별들의 도시인 소녀시대의 도시를 의미한다. 그리고 기존에 벤치마킹했던 RedVelvetCity의 분위기를 가지고 있다. 시간제한이 없기 때문에 Player가 마음 편히 감상이나 공간을 체험할 수 있게 구성했다[5-7].

그림 9은 S#3 뮤직비디어(MV)촬영지를 3D로 구현한 그림이다. 마지막으로 A구간으로 다시 돌아가게 안내를 한 다음, Player가 문이 아닌 램프를 통하여 들어가면 S#4으로 이동된다. 마지막은 문이 아닌 램프로 들어가는 이유는, 앞서 기획에서 말했던 ‘소원을 말해봐’ 즉, 소원을 말해봐의 곡처럼 소녀시대가 소원을 들어주는 의미로 연출시켰다. 각 구간마다 타이틀곡의 대표 컨셉의 오브젝트를 배치하였기 때문에 재미요소를 배가하였다. 또한 각 구간에 올라가기 위해서는 계단을 밟고 올라가야 하기에, 계단을 올라갈 때의 느낌을 더해 재미요소를 추가하였다. 영상이 VR Robby공간에서 나타난다. S#1과 같은 방식의 스크립트로 작성하였고, 소녀시대가 소녀시대 팬들을 위한 영상과 ‘그 여름’곡으로 마무리함으로써, 팬들이 이 콘텐츠를 일회성 소비를 하여도 추억을 자극시켜 여운을 주고 싶었다.

Fig. 9.

3D implementation of S#3 MV shooting site.

그림 10은 본 연구에서 개발 되어진 가상현실 융합콘텐츠를 실제로 전시회 장소에서 소녀시대 VR콘텐츠로 시현하였던 현장사진이다. 콘텐츠 체험자의 시선에 따라 객체가 움직이기 때문에 시선의 방향에 따라 몸이 돌아간 모습을 확인할 수 있다.

Fig. 10.

Demonstration of VR contents exhibition (a) Girls' Generation VR Contents (b) Connect to PC after mobile build

모든 k-pop 가상 콘텐츠은 유니티 엔진으로 제작한 후 PC버전에 있는 콘텐츠를 안드로이드 빌드 과정을 통해 모바일 App으로 추출한 뒤 다시 한 번 PC와 연결하는 잭(Jack)을 이용하여 콘텐츠를 스마트폰이나 일반 PC 양방향으로 소통 가능하도록 개발하였다. 콘텐츠시연과정은 콘텐츠 체험자와 비체험자 모두 볼 수 있도록 시스템을 설정하였다[8-10].

현장시연에서는 본 연구에서 개발된 가상현실제품을 체험한 많은 대학생들을 생동감이 넘치는 체험게임이라고 경험담을 말하였고, 다른 교육용게임분야로 유사한 콘텐츠제작방법이 접목되면 좀더 흥미로운 콘텐츠가 될 것 같다는 피드백을 주었다.