영상 속 문화 분석을 통한 동영상 기반 번역 서비스 디자인 제안

글로벌, 다문화 사회로의 변화에 따라 다양한 언어 간 소통을 가능하게 하는 번역의 개념이 더욱 중요해지고 있다. 번역이란 원문 텍스트를 같은 뜻을 가지고 다른 언어로 바꾸어 전달하는 것을 말한다. 번역의 주체는 사람이 직접 번역하는 인간 번역과 기계가 번역하는 기계 번역으로 나눌 수 있다. 전문 번역사가 아닌 일반인은 기계 번역 이용이 쉬운 방법으로 이는 2차 대전 후 미국과 구소련이 군사 목적으로 개발하기 시작하였다[8]. 이후 1980년대 규칙기반 기술(RBMT; rule-based machine translation), 1990년대 말뭉치 기반 기술(CMT; corpus-based machine translation) 개발로 발전했고, 이 기술 중 하나인 통계 기반 기계 번역(SMT; statistical machine translation)이 대중적으로 사용되었다. 2016년에 인공지능이 적용된 신경망 기계 번역 기술 개발을 통해 번역 품질이 월등히 향상되었다. 신경망 기계 번역은 신경망 단층 구조인 퍼셉트론(Perceptron)이 중층적으로 연결된 구조에서 기계 번역이 이루어진다. 대용량의 데이터 기반 학습을 통해 번역물을 산출하는 점은 같아도 통계 기반 기계 번역이 입력 문장을 구절 단위로 나누어 번역한다면, 신경망 기계 번역은 언어 데이터 자동 학습 방식의 딥러닝 알고리즘을 적용하여 입력 문장을 통째로 학습하기 때문에 맥락 파악 후 더 자연스럽고 정확한 문장을 출력한다[9][10]. 이러한 신경망 기계 번역은 성능 면에서 사람의 번역과 거의 차이를 보이지 않으며 번역 속도는 문장 당 0.2초로 사람과 비교 자체가 힘든 수준까지 도달하였다[11].

기계 번역 서비스는 다음의 세 가지 유형으로 분류할 수 있다. 첫 번째는 무료 온라인 기계 번역(FOMT; free online machine translation)으로 구글(Google), 마이크로소프트(Microsoft), 바이두(Baidu), 아마존(Amazon), 네이버(Naver), 카카오(Kakao)와 같이 IT 기업들이 일반 사용자 대상으로 제공하는 서비스이다. 두 번째는 번역, 언어 기술, 머신 러닝 (Machine Learning) 전문 기업들이 제공하는 보안이 유지되는 고객 중심의 기계 번역 서비스로 시스트란(Systran), 칸탄MT(KantanMT), 릴트(Lilt)등이 있다. 세 번째는 세계지식재산권기구(WIPO; world intellectual property organization), 부킹닷컴 (Booking.com) 등 웹사이트가 사용자의 편의를 위해 제공하는 기계 번역이다[12]. 대중적으로 가장 많이 이용하는 각 사별 무료 온라인 기계 번역 사례는 다음과 같다. 구글은 2007년 통계 기반 기계 번역의 구글 번역기(Google Translator)를 출시한 이후 2014년 카메라 이미지 속 텍스트 번역 기술, 2016년 구글 신경망 기계 번역 (GNMT; google neural machine translation)을 적용하여 번역 품질을 향상하였다.

마이크로소프트는 2013년 윈도우용 빙(Bing)번역기, 2015년 마이크로소프트 번역기(Microsoft Translator)를 출시하였고 2016년 신경망 기계 번역을 적용해 영어, 독일어, 아랍어, 한국어 등 11개 언어를 지원하고 있다. 네이버는 2017년 신경망 기계 번역이 적용된 파파고(Papago) 서비스를 출시하였으며, 카카오 역시 2017년 신경망 기계 번역을 적용한 AI 번역 베타 서비스를 시작하였다[13]. 그림1은 신조어, 축약어 등 일부 해당 문화 관련 번역이 반영된 기계 번역기를 알고리즘과 데이터 학습 범위를 포함하여 비교 분석한 내용이다. 구글 번역의 경우 데이터 학습 범위는 웹 속 번역 콘텐츠로 신조어의 뜻을 파악하여 ‘ㅇㅈ’을 ‘인정’ 의미로 맞게 번역하였다. 파파고는 네이버 서비스의 데이터를 학습하며 국내 서비스로 높임말, ‘먹방’ 등 한국인의 관용어(생활 사용어, 축약어), 사투리 등 한국 문화에 맞게 번역할 수 있었다. 플리토는 다른 사용자와의 집단 지성 번역, 전문 번역가 매칭을 통한 번역과 플랫폼 속 번역 데이터를 학습한 기계 번역을 제공하고 있다. 전문 번역가와 집단 지성 번역을 통해 더 자연스러운 번역을 제공하는 것이 특징이며 집단 지성이 번역한 원천 텍스트를 포함한 유사 번역을 추천해준다[14]-[16]. 이처럼 문화 요소를 포함한 번역이 가능하도록 시도 중이지만 양 언어 간 문법 차이, 나라별 고유 언어, 비언어적 표현과 같이 다양한 문화 요소를 번역하기에는 아직 한계가 있다[17].

Fig. 1.

Translation Platform Comparison

언어는 문화와 밀접한 연관성을 갖는다. 루이즈 다멘(L. Damen)은 문화가 사회구성원의 가치관을 담고 있고 이를 나타내는 수단 중 하나가 언어이기 때문에 문화와 언어는 상호작용한다고 말한다[18]. 언어를 번역하는 것은 단순히 텍스트 자체를 다른 언어로 전환하는 것이 아닌 문자라는 형식 속에 담겨있는 사회구성원의 가치관, 세계관, 시대를 다른 형식으로 바꾸어 표현하는 행위라 할 수 있다[19]. 따라서 언어를 번역할 땐 번역하고자 하는 대상 문화권의 문화 이해를 바탕으로 해야 하며, 언어 이면의 비언어적 요소로서의 문화, 생활양식, 풍습 등이 담겨있어야 한다[20]. 문화번역은 언어 번역뿐 아니라 언어를 매체로 번역하거나 매체를 다른 매체로 번역하는 것까지 포함하고 있다. 대표 사례로 포맷을 수출입하는 리메이크의 경우 언어 번역 외에 대상 문화권의 취향, 정서와 같은 문화도 함께 번역해야 한다. 음성 매체의 경우 음악 장르에 따른 문화 배경의 이해에 따라 같은 음악도 달리 들릴 수 있듯이 콘텐츠를 진정으로 즐기기 위해선 문화적 소양이 필요함을 의미한다[21].

언어 번역에서 언어와 가장 밀접한 언어 외적 표현 중 하나인 비언어적 표현을 번역하고자 하는 연구는 꾸준히 이루어져 왔다. 비언어적 표현은 언어 소통 시 의미 강조, 보완 등 의사소통을 보조하는 수단으로 표정, 몸짓, 손짓 등이 있다[22]. 비언어적 표현은 나라, 문화마다 그 의미가 달라질 수 있고, 똑같은 표현에도 여러 뜻이 존재할 수 있다. 가령 엄지를 치켜세우는 손짓의 경우 미국, 영국에선 좋음, 훌륭함을 뜻하고 독일, 이탈리아, 프랑스 등 유럽에선 숫자 1을, 일본에선 숫자 5를 나타낸다. 반면 그리스, 터키, 러시아, 서아프리카, 방글라데시 등의 나라에선 모욕적임, 욕설을 뜻한다. 또 다른 예로 엄지손가락과 집게손가락으로 동그라미를 만드는 손짓은 미국, 영국, 한국 등 다수 국가에서 좋음, 승인, 괜찮음을 뜻하지만, 한국에서는 이 표현을 괜찮음 외에 돈의 의미로 사용하기도 한다. 다수 국가에서 긍정적 의미로 사용하지만, 프랑스, 벨기에, 러시아에서는 제로, 가치 없음, 독일, 그리스, 이탈리아 등에선 저속한 표현, 욕설 등 부정적 의미로 사용되어 같은 손짓도 문화에 따라 상반된 의미로 사용될 수 있다[23]. 비언어적 표현은 그 특성상 텍스트보다 이미지나 영상에서 더 쉽게 찾아볼 수 있다. 영상 콘텐츠 중 번역이 가장 활발히 이루어지는 영화는 자막, 더빙, 보이스오버의 형태로 번역되며 등장인물의 대사, 표정, 행동, 음향, 억양, 상황 등을 담아 대상 문화권 사람들이 내용을 더 쉽게 이해할 수 있도록 돕는다. 영화에서 비언어적 표현을 자막으로 번역한 사례로 ‘오페라의 유령’이 있다. 무대 장치가 떨어져 매니저가 무대 관리자를 혼내자 무대 관리자가 손가락으로 다른 곳을 가리키며 ‘I was not at my post’라고 대답하는 장면이 있는데, 대답을 한국어로 직역하면 ‘내 자리에 있지 않았다’지만 번역가는 다른 곳을 가리키는 비언어적 표현을 포함해 ‘난 저쪽에 있었다.’로 번역하였다. 억양도 일종의 비언어적 표현으로 영화 ‘A.I’에서 외계인이 인공지능 데이빗을 발견하고 소원을 이루어 주겠다고 제안하는 장면이 나오는데 이때 메가토이 테디가 데이빗을 부르자 ‘Yes Teddy.’라고 끝의 억양을 올려서 말한다. 번역가는 ‘응, 태디’라고 번역하지 않고 억양을 포함하여 ‘왜, 태디?’라고 번역하였다[24]. 이처럼 번역 시 비언어적 표현을 포함해 번역하면 내용을 더 직관적으로 이해할 수 있게 만든다. 특히 영상의 경우 글과 달리 장면 전환이 빨라 앞뒤 맥락을 놓칠 수 있으므로 비언어적 표현을 포함한 번역이 필요하다.

문화 번역(Cultural Translation)이란 언어 번역 시 대상 문화권의 문화를 고려해야 한다는 것을 말한다. 일반 텍스트 번역과 달리 문화번역은 언어, 행동 양식, 가치관 속 문화적 의미를 파악해 맥락에 맞게 의미를 변환하는 행위이다[25]. 문화번역이란 단어 속 ‘번역’은 여전히 텍스트 기반의 언어를 다른 언어로 변환하는 것을 의미하지만 2000년 이후로 한국 대중문화계에서 프로그램 포맷을 수·출입하여 리메이크(Remake) 제작하는 사례가 증가하면서 문화번역의 뜻에 이를 포함시켜 정의하고 있다[26]. 여기에서 포맷이란 프로그램 형식이나 구성을 뜻하며 리메이크란 발표됐던 콘텐츠들을 동일 내용으로 새롭게 다시 만드는 일을 말한다. 음악, 드라마, 영화, 예능 등의 장르가 있으며 텍스트와 달리 영상 콘텐츠에서는 언어 외에 몸짓, 어조 등의 비언어적 표현, 가치관, 음식, 제도, 복식, 행동 양식 등이 적용된다. 리메이크 기반 문화번역 사례로 한국 영화 ‘시월애’를 미국에서 리메이크한 ‘레이크 하우스’에서 영화 속 중요 소통 소재인 우체통 형태는 문화에 따라 각각 달리 표현된다[27].

영상 콘텐츠의 소비 증가에 따라 영상 기술도 지속적으로 발전하고 있다. 특히 스낵 컬처(Snack Culture) 소비 증가로 인해 영상 내용을 빠르게 파악하는 영상 검색 기술이 발전하고 있다. 스낵 컬처란 과자 먹듯 짧은 시간 안에 콘텐츠를 소비하는 문화를 가리키며, 기업들은 영상 내용을 빠르게 파악하고 이동이 용이하도록 만드는 기능을 서비스에 추가하고 있다. 문화번역은 역사, 가치관과 같이 접근이 힘든 요소도 포함되어 있어 자칫 소비자에게 부담을 줄 수도 있지만, 스트리밍과 숏폼 비디오 트렌드를 결합해 15초 내 전문가가 지식 스트리밍을 해주는 지식공유 플랫폼인 ‘커넥츠(Connects)’ 사례와[28] 같이 문화번역에도 이처럼 콘텐츠를 가볍게 즐기는 스낵 컬처 트렌드를 적용하여 축약어, 신조어 등 가볍지만, 또 문화 콘텐츠 소비에 꼭 필요한 스낵 컬처의 번역 지점 반영이 필요하다. 번역 지점에 적용할 수 있는 검색과 이동 용이성을 갖춘 서비스로 구글 비디오 서치(Google Video Search)와 유튜브 비디오 챕터(Youtube Video Chapter)가 있다. 구글 비디오 서치는 새로운 영상 검색 기능으로 구글 검색 창에 검색어 입력 시 영상 카테고리에 유튜브 영상이 있으면 그림 2의 좌측과 같이 영상 타임스탬프의 미리 보기 이미지와 간략 제목이 제시되어 전체 영상 시청 없이 대략의 내용을 확인할 수 있다. 유튜브의 경우 동영상 챕터 기능을 새로 추가하였다. 동영상 챕터 기능이란 내용을 빠르게 탐색하고 원하는 구간을 쉽게 찾을 수 있도록 하는 것으로 지금까지 영상 업로더가 댓글 또는 영상 설명란에 타임스탬프를 적던 것을 유튜브가 기능화시킨 것이다. 그림 1의 우측과 같이 앱 버전에서는 영상 하단의 슬라이드 바를 움직이면 챕터별로 제목이 표시되고 PC 버전은 슬라이드 바에 마우스 오버 시 제목을 확인할 수 있다.

Fig. 2.

Functions Related to Video Section Setting

본 연구는 기존 텍스트 기반 번역기와 달리 영상 기반의 동영상 입·출력 기반 문화 번역기이므로 대표 영상 장르를 유형화하기 위해 국내 주요 OTT 플랫폼 영상 콘텐츠의 분류체계를 정리하였다. 대상은 넷플릭스(Netflix), 웨이브(Wavve), 왓챠(Watcha), 티빙(Tving)으로 4개 플랫폼의 영상 분류 방식을 분석 후 2개 이상 플랫폼이 동일하게 제공하고 있는 항목을 그림 3과 같이 정리하였다. 상위 분류는 드라마, 영화, 예능, 다큐멘터리, 스포츠이고, 하위분류는 상위 카테고리에 맞추었다.

Fig. 3.

Category Classification of Video Contents

케이-컬처의 흥행으로 한국 프로그램 포맷이 여러 나라로 수출되고 있는데 그중 복면가왕은 한국 방송 프로그램 최초로 세계 포맷 판매 순위 탑 100에 진입하는 기록을 세웠다[31]. 한국 프로그램 제작자들은 ‘나는 가수다’, ‘아빠 어디가’ 등이 중국에서 성공하면서 포맷 비즈니스 모델을 중국시장에 맞춰 발전시켜 왔는데, 한한령(限韓令) 이후 중국 수출이 어려워지면서 대체 시장을 찾게 되었다[32]. 이후 수많은 한국 프로그램이 동남아시아, 미국 등으로 수출되었지만, 특히 복면가왕은 가장 많은 나라에 판권이 팔리며 동남아시아를 시작으로 미국, 영국, 프랑스, 독일, 러시아 등 전 세계 50여 개국으로 포맷이 수출되었다. 복면가왕이 많은 나라로 수출된 이유 중 하나는 문화 차이로 인한 장벽이 낮은 음악 예능이기 때문이다. 각 나라 고유 언어의 자국 가요를 활용하여 현지 사람들의 접근성을 높일 수 있다[33]. 이와 같은 이유로 본 연구는 복면가왕을 분석대상으로 정하였다. 그중 언어 번역뿐 아니라 포맷, 진행, 출연자 발화 등 나라 간 문화번역의 비교를 위해 시청률이나 인터넷 반응에 영향받지 않고 온전히 기획자의 의도를 볼 수 있는 한국 복면가왕 1화와 미국 복면가왕 시즌 1의 1화를 분석하였다.

2장에서 제시한 데이비드 카탄(D. Katan)의 텍스트 기반 문화번역 관점의 문화 분류체계를 영상 기반 문화번역의 관점으로 해석하여 다음의 세 가지로 재정의하였다. 첫째, ‘변형 없이 그대로 사용’, 둘째, ‘목표 문화권의 문화에 적합하게 필수적으로 변형’, 셋째, ‘연출자 의도에 맞게 변형’이다. 본 연구는 영상 기반의 문화번역 관점을 바탕으로 복면가왕 포맷 흐름에 따른 연계 비교가 필요한 문화번역 지점을 선정하였고, 에드워드 홀의 언어, 복식, 어조, 몸짓, 놀이와 같이 3가지 문화 차원 구성요소가 담긴 문화 적용 지점 하위 8개를 도출하였다. 그 지점은 다음과 같다. 첫 번째 분류인 ‘변형 없이 그대로 사용’으로는 복면가왕 프로그램 포맷 자체에 있다. 복면가왕 포맷은 크게 복면 가수 소개, 무대, 복면 가수 인터뷰, 투표 및 결과 발표, 복면 공개로 진행되며 사회자, 복면 가수, 패널, 방청객의 구성요소로 이루어져 있다. 이처럼 프로그램의 큰 틀은 문화번역 때 변형 없이 가져오고 세부 내용은 목적에 맞게 변경할 수 있다. 두 번째 분류인 ‘목표 문화권의 문화에 적합하게 필수적으로 변형’은 가면 형태와 대결 방식이 있다. 한국과 미국 복면가왕의 큰 차이점 중 하나는 가면 형태에 있다. 한국은 단일민족국가로 피부색의 큰 차이를 보이지 않아 얼굴만 가리는 가면을 착용하여도 정체를 파악하기 어렵다. 하지만 미국의 경우 다인종 국가로 손, 발, 목 등 신체 부위가 노출될 경우 피부색으로 인해 정체를 특징지을 수 있어 몸 전체를 가리는 가면을 착용하고 있다. 또한, 동물을 모티브로 한 가면 표현에 있어 한국의 가면은 귀여운 인상의 캐릭터로 표현하지만, 미국의 경우 동물 피부 질감, 형태 등 실재감 있게 표현하고 있다. 미국이 가면을 실제 동물처럼 제작하는 배경에는 방송 제작 문화 차이가 있다. 요즘 한국도 시즌제, 사전 제작을 하는 추세이지만 복면가왕이 첫 방송을 한 2015년 당시 매주 방영을 하는 것이 지배적이었고, 따라서 가면 제작 시 짧은 시간 안에 만들 수 있는 소재의 가면을 다수 제작하게 되었다. 하지만 미국의 경우 시즌제, 사전 제작하는 문화가 발달해있어 정교하고 실제 동물처럼 표현한 가면을 제작할 수 있다. 시즌제에 따른 가면 제작 방식의 차이로 미국은 탈락자를 최소한으로 만드는 대결 방식으로 진행하고, 한국은 다수의 탈락자가 나오는 대결 방식으로 진행한다. 세 번째 분류인 ‘연출자 의도에 맞게 변형’에는 무대 연출 방식, 로고 표현, 프로그램 제목이 있다. 연출자 의도에 의한 변형의 경우 프로그램의 재미, 각 나라의 트렌드를 고려해 변형한다. 무대 연출 방식의 경우 한국은 가창력에 초점을 맞춰 춤을 추기보다는 가창력을 드러낼 수 있는 무대를 선보였고, 미국의 경우 퍼포먼스에 초점을 맞춰 가면의 콘셉트와 어울리는 모습을 한 백업 댄서와 함께 춤을 추면서 노래를 부르는 무대를 선보였다. 한국의 경우 노래의 절정이 후반부에 있는 것을 고려해 1절에서 자르지 않고 완창하는 것을 보여주었고 미국의 경우 도입부와 후렴만 부르는 것을 보여줬다. 무대가 끝나고 감상을 물어보는 것에서 한국 사회자는 ‘노래를 어떻게 들으셨나요?’라 말했고 미국 사회자는 ‘퍼포먼스가 어땠나요?’라고 말해 무대에 대해 언급한 점은 같지만 다른 요소에 초점을 맞춘 단어 선택 차이를 보였다. 한국과 미국 복면가왕 연출자는 복면가왕 구성 중 비중을 둔 요소가 달랐는데, 한국은 가면보다 대결에 비중을 두었고, 미국은 대결보다 가면에 비중을 두었다. 이는 앞서 언급한 방송 기간에 따른 가면 제작 방식의 영향이라 볼 수 있다. 로고 표현 방식의 경우 한국은 레슬링 가면을 착용한 두 사람이 마주 서 있는 모습을 넣고 강렬한 빨간색 캘리그래피체를 사용해 열정적이고 거친 대결의 모습을 표현하였다. 반면 미국은 나비 형상의 가면, 산세리프체, 보라색을 사용해 세련되고 신비한 가면무도회 모습을 표현하였다. 또한, 프로그램 제목의 경우 한국 복면가왕(King of Masked Singer)은 ‘왕(King)’이란 단어를 넣어 대결을 암시했지만, 미국 복면가왕은 ‘왕’을 삭제하고 ‘The Masked Singer’로 번역하였다. 이처럼 세 가지 분류 기준으로 분석한 문화번역 지점을 영상 문화번역 인터페이스에서 사용자가 문화번역 지점이 전체 영상 중 어디인지 알 수 있도록 영상 프로그레스 바(Progress Bar)에 표시하였다. 그림 4는 한국과 미국 복면가왕 프로그램 ‘나비’ 복면 차이의 예시이며 하단 표는 한미 가면별 형태 차이를 유형별로 분석, 정리한 내용이다.

Fig. 4.

Mask Form Analysis

그림 5는 언급한 내용을 종합한 한미 복면가왕의 포맷과 문화번역 지점의 연계 분석표이다. 3개의 유형과 하위 8개의 문화번역의 고려가 가능한 지점을 정리하였다.

Fig. 5.

Format and Cultural Translation Analysis Table

그림 6은 영상 선택과정으로 앱을 실행할 시 상위 분류인 드라마, 영화, 예능, 다큐멘터리, 스포츠 중 선택 시 하위분류가 제시된다. 하위분류를 선택하면 해당 카테고리에 속하는 리메이크 프로그램 포스터와 프로그램 설명이 나오고 사용자는 그것을 참고하여 프로그램을 선택할 수 있다. 어떤 나라의 리메이크 버전을 볼 것인지 출연자, 진행자, 러닝타임 등의 제공 정보를 참고하여 선택할 수 있다. 장르, 프로그램 종류, 나라, 문화번역의 순서로 원하는 콘텐츠로의 이동이 가능하다.

Fig. 6.

Translation Video Selection Process

그림 7은 본 서비스의 기본 인터페이스로 태블릿 가로화면에 사용자가 주 영상, 부 영상을 비교 시청할 수 있게 구성하였다. 주 영상, 부 영상은 각각의 프로그레스 바로 조정할 수 있다. 번역하고자 하는 프로그램 선택 시 영상이 1개씩 순차 재생되며 언어 학습 효과를 위해 영상의 구간 반복, 저장, 공유를 할 수 있다. 기존 텍스트 기반 일반 번역 서비스와 같이 언어 변환 스위치를 활용하여 시청 중인 주 영상과 문화번역 대상인 부 영상으로 구분하여 변환할 수 있게 설계하였다.

Fig. 7.

Main Screen and Language Switch Function

그림 8은 문화번역 순서로 이미지 상단은 서비스 속 두 영상의 기본 프로그레스 바이다. 각 영상 하단에 존재하며 프로그레스 바 속에 표시된 문화번역 지점을 보고 원하는 구간으로 이동할 수 있다. 또한, 번역 구간 길이를 나타내기 위해 부 영상의 영상 프로그레스 바는 다른 색인 밝은 파란색으로 표시하였다. 그림 8의 이미지 중간은 6개의 문화번역 순서를 나타낸 것으로 1번은 주 영상의 문화번역 지점에 도달 시점이다. 2번은 해당 문화번역 지점에서의 구간 재생 장면이다. 3번은 구간 종료 후 주 영상 정지 장면이다. 4번은 주 영상에 대응하는 부 영상의 문화번역 지점 재생 장면이다. 5번은 구간 종료 후 부 영상 정지 장면이며, 마지막 6번은 위 3번과 같이 정지된 부 영상 구간부터 이어서 재생되는 장면이다. 서비스 속의 부 영상은 주 영상의 번역 지점에 맞춰 시청할 수 있도록 배려하였다. 그림 8의 하단 이미지는 번역하기 버튼 기능을 나타낸 것으로 문화번역 순서 중 2번을 지날 때 앱 하단에 번역하기 버튼이 팝업으로 뜬다. 이때 번역하기를 선택하면 4번의 부 영상 문화번역 구간 재생으로 이동하고 선택하지 않으면 6번 주 영상 재생으로 이동한다. 번역하기 버튼은 사용자가 주 영상 시청의 집중에 지장이 없도록 번역 여부를 물어보게 설계하였다.

Fig. 8.

Cultural Translation Process

그림 9는 문화번역 및 해설 인터페이스로 사용자 시선의 흐름에 따라 1, 2, 3번 순서대로 진행된다. 1번은 목표 문화권의 문화를 적용하며 바뀌게 되는 부분으로, 배경색과 함께 강조 색으로 자막을 제시하여 대상 문화권의 문화 해석 구분을 용이하게 하였다. 2번은 문화 차이로 바뀌게 된 이유로, 바뀐 부분이 자막으로만 나오면 출연자의 발화 속도에 따라 자막을 놓칠 수 있으므로 영상 프로그레스 바 하단에 문화번역 구간이 종료될 때까지 팝업창을 통해 해당 영상 구간의 문화번역 이유를 볼 수 있다. 번역된 문화번역 내용보다 더 자세한 문화 배경을 알고 싶다면 해당 문화의 구체적인 설명인 3번을 통해 팝업창 하단 속 구체적인 문화 설명을 확인할 수 있다. 또한, 해당 문화의 추가 심화 내용을 알고 싶다면 3번 하단의 영상 링크를 통해 관련 영상을 시청할 수 있다. 그림 9의 인터페이스 속 번역된 문화 관련 내용은 다민족국가, 단일민족국가에 따라 가면 형태의 차이가 생겼다는 것을 설명하는 번역 예시이다.

Fig. 9.

Cultural Translation Screen

그림 10은 자막 보기 옵션의 토글(Toggle)스위치로 영상 시청 중 자막을 통해 언어 학습 효과를 증진할 수 있다. 자막 기능을 켜면 현재 재생 중인 영상 하단에 자막이 나오며 A 나라 영상 하단 자막은 B 나라 언어로 번역된다. 가령 한국, 미국 복면가왕 영상을 시청 중이면 한국 영상 하단에 영어 자막이, 미국 영상 하단에 한국어 자막이 뜨게 설정할 수 있다.

Fig. 10.

Language Translation Subtitle Screen

그림 11은 목차 기능을 통해 쉽게 다른 카테고리로 이동할 수 있게 하는 문화번역 목차 활용 인터페이스이다. 문화번역 지점이 주 영상, 부 영상 프로그레스 바에 각각 표시되어 있지만, 재생 지점 이동 없이는 정확히 어떤 카테고리의 번역인지 알 수 없으므로 목차 기능에 프로그램 진행 순서를 적용하였다. 앱 하단 목차를 펼치면 영상 속 콘텐츠의 진행 순서에 맞게 카테고리가 나열되고 원하는 카테고리를 선택하면 해당 문화번역 지점으로 이동한다. 이때 재생 중인 영상뿐 아니라 멈춰있는 영상 또한 해당 문화번역 지점으로 이동할 수 있다.

Fig. 11.

Cultural Translation Contents Screen