사진 한 장으로 3D 캐릭터 움직이는 AI: UNIST의 ‘디폼스플랫’ 기술 해설

안녕하세요. 친절한 IT 해설가입니다.
요즘 AI 기술 발전 속도가 정말 놀랍죠. 텍스트로 이미지를 만들고, 이미지로 짧은 영상을 만드는 시대인데요. 특히 3D 콘텐츠 제작 분야에서는 '시간과 비용'이라는 큰 벽이 늘 존재했어요.
오늘 소개해 드릴 소식은 이 벽을 허물어줄 수 있는 아주 기대되는 기술인데요, 바로 울산과학기술원(UNIST)에서 개발한, 사진 단 한 장만으로 3D 캐릭터의 움직임을 자연스럽게 만들어주는 AI 기술에 관한 내용입니다.
함께 자세히 살펴보시죠!
1. 기존 기술의 한계, '형태 왜곡'을 잡다
최근 몇 년 사이 3D 콘텐츠 제작 효율을 높이기 위해 다양한 AI 모델들이 등장했지만, 언제나 큰 숙제가 하나 있었습니다. 바로 '사진 한 장'의 정보만 가지고 3D 물체를 움직이려 할 때, 물체의 형태가 심각하게 훼손되는 문제였어요.

 

 

우리가 어떤 물체를 옆으로 돌리거나 팔을 움직이게 하려면, 그 물체가 앞뒤, 좌우로 어떻게 생겼는지에 대한 충분한 데이터가 필요합니다. 하지만 2D 사진은 정면 정보만 담고 있으니, AI가 나머지 정보를 상상해서 채울 때 오류가 발생했던 것이죠.
마치 종이 인형을 억지로 구부리려고 하면 찢어지거나 모양이 망가지는 것과 비슷하다고 볼 수 있습니다.
2. UNIST의 해결책: AI가 스스로 '뼈대'를 만든다
UNIST 인공지능대학원 주경돈 교수팀은 이 문제를 해결하기 위해 '디폼스플랫(DiformSplat)'이라는 기술을 개발했습니다 [1].
이 기술은 이름처럼 변형이 가능한 '가우시안 스플래팅' 모델을 기반으로 하는데요. 전문 용어는 잠시 잊으셔도 괜찮습니다. 핵심은 이것입니다.
개발된 AI는 사진 속 물체가 어떻게 움직여야 가장 자연스러울지, 즉 물체의 '구조적 특성'을 스스로 학습합니다. 그래서 마치 인체에 뼈대가 있듯이, AI가 3D 물체 내부에 스스로 뼈대 역할을 하는 구조를 만들어 넣는다고 해요.

 

 

이 뼈대 덕분에 AI는 사진 속 2D 캐릭터의 동작 지침을 받으면, 3D 모델의 외형을 망가뜨리지 않고도 자연스럽게 자세를 바꾸거나 움직임을 따라 할 수 있게 된 것입니다.
3. 메타버스와 애니메이션의 게임 체인저
그렇다면 이 기술이 왜 그렇게 중요한 걸까요? 바로 제작 시간과 비용을 획기적으로 줄여주기 때문입니다.
기존에는 3D 캐릭터를 만들고 움직임을 부여하려면 수많은 각도에서 촬영한 데이터나, 숙련된 아티스트의 수작업이 필요했습니다. 하지만 이제는 사진 한 장만 있으면 복잡한 과정 없이 바로 역동적인 3D 캐릭터를 만들 수 있어요.

 

 

이는 메타버스 환경에서 나만의 아바타를 실시간으로 조작하거나, 애니메이션 제작 스튜디오에서 캐릭터의 움직임을 빠르게 구현해야 할 때 엄청난 효율을 가져다줄 것으로 기대됩니다.
우리가 상상하는 대로 캐릭터를 3D 공간에서 움직이는 것이 더욱 쉬워지는 것이죠.
4. 마무리하며 드는 기대감
UNIST의 이번 연구는 AI가 단순히 결과물을 생성하는 것을 넘어, 3D 모델의 내부 구조와 움직임의 원리까지 이해하고 있다는 것을 보여줍니다.
‘사진 한 장’이라는 최소한의 정보로 최대의 결과물을 뽑아내는 이 기술은, 앞으로 콘텐츠 제작의 민주화에 크게 기여할 것으로 보여요. 누구나 쉽게 고품질의 3D 콘텐츠를 만들 수 있는 시대가 성큼 다가온 것 같아 매우 기대됩니다. 😊
다음에도 흥미로운 IT 소식으로 찾아뵙겠습니다. 감사합니다!


% 본 포스팅은 AI를 활용하여 작성된 정보성 글입니다.