KT, 지니버스에 'AI NPC' 도입…‘메타버스에서 커피 주문을’

초거대 AI ‘믿음’ 기반 실제 가게ㆍ가상 상점 연결
M.I.M 기술로 맥락 분석해 나만의 콘텐츠 만들기
집 주소 입력하면 ‘지니홈’ 생성…내 맘대로 꾸미기
“침체 메타버스 산업, 생성형 AI 등이 돌파구 될 것”

▲KT 지니버스에서 생성형 AI를 통해 이미지를 생성할 수 있다. (사진 제공= KT)

KT가 자사 B2C 메타버스 플랫폼 ‘지니버스’에 생성형 AI와 디지털트윈 기술을 도입해 메타버스 플랫폼의 차별점을 꾀한다. 침체된 메타버스 산업은 결국 생성형 AI, 디지털트윈 기술 등을 도입해 이용자들이 현실과 같은 경험을 할 수 있도록 만들어야 한다는 판단이다. 특히 올해 하반기에는 초거대 AI ‘믿음’ 기반의 AI NPC를 활용해 메타버스에서 실제 상점을 이용할 수 있도록 할 계획이다.

30일 KT는 지니버스에 생성형 AI와 디지털트윈 기술을 도입해 이용자가 직접 콘텐츠를 만들고 소비하는 참여형 메타버스 경험을 제공하는 플랫폼으로 발전시킬 것이라고 밝혔다.

지니버스를 지난 3월부터 구글플레이 스토어와 애플 앱스토어에서 오픈베타(시범 서비스) 버전으로 서비스하고 있다. 약 두 달 동안 이용자들이 애플리케이션을 내려 받은 횟수는 4만6000건이다.

현재 지니버스는 생성형 AI 기반의 'AI M.I.M(Message, Image, Motion)' 기능을 실험적으로 제공하고 있다. AI M.I.M(가칭)은 사용자의 입력에서 AI가 감정 등의 맥락(Context)을 분석하고 이해해 나만의 콘텐츠를 생성해주는 기능이다. 이용자가 입력한 텍스트를 기반으로 멀티미디어 메시지와 배경 이미지 등이 자동 생성된다. 여기에 이용자 고유의 아바타 모션을 만들고 편집해 나의 감정과 상태를 아바타에 현실감 있게 투영할 수 있다.

지니버스 내 ENA 오리지널 드라마 ‘보라! 데보라’ 전용관에 있는 ‘보라 쇼츠’는 생성형 AI 기술을 토대로 만들어진 콘텐츠다. 생성형 AI 중 하나인 모션 AI가 적용돼 아바타가 드라마 장면을 그대로 따라 할 수 있고, 드라마 영상과 아바타를 자연스럽게 합성해 짧은 영상을 제작해준다.

KT는 디지털트윈 기술을 도입해 'AI 홈트윈'을 선보였다. 디지털트윈이란 현실세계의 기계나 장비, 사물 등을 컴퓨터 속 가상세계에 구현한 것을 말한다. AI 홈트윈은 AI 모델링 기술로 디지털트윈을 구현해낸다. 이 기능은 도면의 입력부터, 분석, 모델링을 한 번에 수행해 디지털트윈 공간을 쉽고 직관적으로 만든다.

이용자가 실제 거주하는 아파트 주소를 입력하면 지니버스에 현실 공간의 도면을 바탕으로 한 '지니홈'을 만들어진다. 이를 1000여 개의 아이템을 활용해 나의 개성에 맞는 공간으로 꾸밀 수 있다. 홈 공간 외에도 드라마 세트장을 그대로 옮겨와 촬영 현장을 메타버스에서 직접 체험할 수 있다.

▲원종서 팀장이 30일 KT ‘지니버스’의 향후 발전 방향에 대해 설명하고 있다. (임유진 기자 newjean@)

올 하반기에는 초거대 AI '믿음(Mi:dm)' 기반의 AI NPC(Non Player Character, 이용자가 직접 조종할 수 없는 캐릭터)를 도입할 예정이다.

믿음으로 만들어진 AI NPC는 텍스트와 TTS, 감정, 모션 등을 자유롭게 활용할 수 있다. 일상 대화부터 전문적인 상담까지 가능하다. △상담 주제별로 맞춤형 응대가 가능한 AI 에이전트 △전문 지식과 공감 능력을 기반으로 대화를 생성하는 AI 전문가 △이용자의 고민에 공감과 위로를 할 수 있는 AI 친구 등 다양한 역할을 수행할 수 있다.

KT는 이를 기반으로 지니버스에서 KT가 운영 중인 다양한 서비스에 관한 문의와 응대를 수행하는 AICC(AI 콘택트 센터)와 전문적인 육아상담 서비스 등을 준비하고 있다.

원종서 KT 융합기술원 AI2XL연구소 팀장은 "이용자가 지니버스에서 콘텐츠 생산과 확대에 적극 참여할 수 있도록 생성형 AI와 디지털트윈 기술 등 관련 기술을 계속해서 고도화할 것"이라며 "이를 위해 플랫폼 및 콘텐츠 업계와 적극적으로 협력하면서 메타버스 생태계를 확대해 가겠다"고 말했다.

KT는 디지털트윈으로 지니버스에 실제 상점을 구현해 이용할 수 있게 하는 방안도 검토하고 있다. 지니버스에 생성된 가상 상점과 실제 상점을 연계한 후 AI NPC를 통해 문의하거나 예약을 접수하는 방식이다. 현재는 KT 융합기술원 임직원들을 대상으로 지니버스에 우면동 인근의 카페를 구현해냈다. 메타버스 공간에서 주문하고 음료를 실제 매장에서 받는 서비스를 테스트 중이다.

KT는 추후 홈 공간 외에도 강의실, 홍보관 등을 구현하는 디지털트윈 서비스를 확대해 이용자에게 지니버스에서의 다양한 공간 경험을 제공할 계획이다.

학계에서도 메타버스에 생성형 AI 등 기술을 도입하면 산업이 성장할 수 있을 거라는 의견이 나왔다. 김주호 카이스트 교수는 “생성형 AI와 메타버스는 ‘생성’이라는 공통점이 있다“면서 “메타버스에 생성형 AI가 도입되면 텍스트, 이미지 등 생성을 저렴하고 확장성 있게 해낼 수 있다. 두 개가 만나서 낼 시너지가 크다고 생각한다”고 말했다.