AI 가상 아바타(인물)의 시대가 온다, 마케팅 인플루언서로 데뷔 feat.Xmov, Sogou

소요에서 관련 내용 확인하기

가상 아바타는 컴퓨터 비전과 자연어 처리가 합쳐져 구현하기 매우 어려운 기술 집합체이며 사람을 상대하는 경우 사람 심리나 문화 요소까지 고려해야 하는, 간단히 말해 융합 프로젝트라고 할 수 있습니다. 흥미롭게도 최근 중국 소식을 보니 이틀 차이로 가상 아바타 2명이 출시되어 함께 소개하고자 합니다.

---

먼저, 가상 KOL(Key Opinion Leader, 대중에게 강한 영향력을 끼칠 수 있는 사람을 가리키는 말로 마케팅 용어로 많이 사용) “링(Ling)”에 대한 내용입니다.

링은 중국 AI 스타트업 Xmov(魔珐科技)와 미디어 기업 츠시원화(次世文化)가 합작하여 만든 가상 아바타입니다. Xmov는 자체 개발한 풀스택(full-stack) 앤드투앤드(end-to-end) AI 기술을 바탕으로 얼굴 표정, 논, 몸, 손가락 동작 등 AI의 움직임을 모델링했습니다. 츠시원화는 한국, 일본의 가상 아바타와는 또 다른 중국만의 특색을 살리고자 했으며 링의 아이덴티티가 확연히 드러나도록 했습니다.

<출처: Xmov 홈페이지>

링 개발팀은 베이징 오페라와 같은 문화예술 공연, 고전과 현대 패션의 콜라보 작품 등의 작업에 링을 적극 활용할 것이라고 밝혔습니다. 이로써 중국만의 소프트파워를 강력하게 유지하고 외부에 효과적으로 전파할 수 있을 것입니다. 또한, 본래 상업 목적으로 프로그래밍된 링은 생방송, 온라인 SNS 및 오프라인 활동 등 다양한 비즈니스 영역에 참여할 것으로 보입니다. 기존에는 2D로 많이 사용되었던 가상 아바타와 달리 영상, 광고, 생방송 등에서 더 역동적인 모습을 보여줄 것으로 기대됩니다.

중국 신문 매체 신쉬지에(新世界)에 따르면, 2023년까지 중국의 가상 인물 산업 시장 규모는 1.5억 위안(한화 약 2600억 원)에 이를 것이라고 합니다. 많은 한국의 젊은이들이 유튜버를 꿈꾸는 것처럼 현재 중국에도 유명 왕홍(网红, 인기 BJ를 이르는 말)이 되고 싶어 하는 사람이 많습니다. 하지만 이제는 실제 사람 BJ가 아닌 가상 유튜버(Virtual YouTubers)가 뜨고 있습니다. 일본의 뮤지션 캐릭터 키즈나 아이와 하츠네 미쿠나, 중국의 뮤지션 캐릭터 뤄톈이(洛天依) 모두 가상 아바타이자 유튜버입니다. 키즈나 아이의 경우 유튜브, 틱톡, 트위터 등의 모든 SNS의 팔로워 수를 계산하면 약 600만 명이고, 뤄톈이의 웨이보(微博, 중국판 페이스북) 팔로워 수는 약 400만 명이라고 합니다.

다음으로 가상 앵커 “신샤오웨이(新小微)”와 관련된 내용입니다.
신샤오웨이는 중국 신문 매체인 신화셔(新华社)와 검색 엔진 회사 쏘우고우(搜狗)가 합작하여 만든 3D AI 앵커입니다. 기본적으로 AI 앵커는 무엇보다 음성합성, TTS(text-to-speech) 등의 음성 기술과 입모양, 표정 등 컴퓨터 비전 기술이 중요합니다. 하지만 이번에 등장한 신샤오웨이는 3D 기술이 적용되어 앉은 상태, 서 있는 상태, 걷는 상태, 다양한 제스처 및 다각도 화면 제공이 가능합니다. 즉 이전까지 앉은 상태와 비교적 단순한 제스처만이 가능했던 가상 앵커를 개발해오던 신화셔와 쏘우고우가 큰 변화를 이루어낸 셈입니다.

신샤오웨이 모델링은 다음과 같은 과정을 거쳤습니다. 실제 사람 여기자인 짜오완에이(赵琬微)가 데이터 수집이 가능한 특수 헬멧을 착용한 상태로 각종 표정, 제스처를 선보입니다. 몇 백 개의 카메라가 그녀를 촬영하면서 표정, 입술 모양, 입을 벌리는 크기, 근육 움직임 등 몸 전체의 움직임을 하나하나 기록하고 학습합니다. 이를 바탕으로 음성기술이 합쳐지면서 신샤오웨이가 주어진 텍스트를 바로 음성으로 변환하여 읽을 수 있게 된 것입니다.

<출처: 好看视频>

신샤오웨이가 첫 데뷔를 하고 맡은 소식은 5월 21일 시작된 양회(两会)로, 이는 중국 내뿐만 아니라 세계 각국에서도 관심을 가지는 매우 중요한 정치 행사입니다. 새롭게 적용한 기술로 가장 의미있는 국내 정치 행사를 보도하게 되니 더 큰 의의를 가지는 듯합니다. 그래서 그런지 이번 신샤오웨이와 관련된 영문 기사도 꽤 보이네요.

(추가 사항) Xmov의 또 다른 가상 아바타(링X)가 이야기하는 영상입니다. 내용이 재밌네요.

"사실 나도 너희와 같은 존재라 몇 가지 감정을 느껴. 기쁠 땐 웃고, 슬플 땐 울고, 어떨 때는 화도 나. 난 선생님, 모델, BJ 등 많은 신분을 가질 수 있어. 가상 세계는 마치 거울처럼 현실이 그대로 반영된 공간이야. 앞으로 가상과 실제 사이의 더 많은 교류가 일어날거야."
http://mofa.mfweb.club/service.html

Xmov魔珐科技

신샤오웨이가 실제 말하는 영상입니다. 본인 스스로 발화, 표정, 제스쳐 등이 자연스럽다고 자신있게 말하네요.
https://haokan.baidu.com/v?pd=wisenatural&vid=3841684282481028598

【支持实时360°播报新闻的全球首位3D版AI合成主播来了！】搜狗联合新华社发布全球首位3D版AI合

 

---

참고 원문: https://baijiahao.baidu.com/s?id=1667261539631101076&wfr=spider&for=pc

참고 원문: https://mbd.baidu.com/newspage/data/landingsuper?context=%7B%22nid%22%3A%22news_9692296673539242092%22%7D&n_type=1&p_from=4