머리 움직임 살리고 표정만 고치는 VFX
AI로 연기 데이터 자동 생성도

덱스터스튜디오는 4D 얼굴 메쉬(시간축 포함 얼굴 3D 데이터) 기반 영상 생성 기술 특허를 취득했다고 3일 밝혔다.


"표정만 콕 집어 수정" 덱스터, 4D 얼굴 메쉬 특허 취득
AD
원본보기 아이콘

배우 연기를 초당 수십 회 3D 스캔한 데이터에서, 고개를 끄덕이거나 기울이는 움직임은 그대로 두고 표정만 정밀하게 수정하는 기술이다.

기존에는 표정을 고치려면 프레임 간 정합성을 맞추기 위해 머리 움직임을 없애는 '메쉬 안정화' 과정을 거쳐야 했다. 이 과정에서 머리 끄덕임과 회전 등 연기 정보가 함께 사라져 감정 전달이 어려웠다.


새로운 기술은 머리 움직임과 표정을 분리해 처리한다. 머리 움직임은 유지하면서 표정만 세부적으로 조정할 수 있어 연기와 감정을 더 자연스럽게 구현한다. 특정 프레임에 표정을 새로 넣거나 바꿀 수 있어 재촬영·보완 촬영에 드는 비용과 시간도 줄인다.

일부 구간의 정밀 4D 얼굴 메쉬를 AI 모델에 학습시켜, 촬영하지 않은 분량의 연기 데이터를 만드는 일도 가능하다. 디지털 휴먼 제작과 연기 캡처 기반 애니메이션, 배우 움직임을 다른 배우 얼굴에 입히는 '얼굴 애니메이션 리타깃팅' 등에 폭넓게 응용할 수 있다.

AD

송재원 덱스터 R&D연구소장은 "기존 기술보다 효율은 높이면서 상업 콘텐츠에 쓸 수 있는 완성도를 갖춘 게 차별점"이라며 "AI 리에이징, 페이스 스왑 등 AI 결합 VFX 기술로 차세대 제작 파이프라인을 구축하고 있다"고 말했다.


이종길 기자 leemean@asiae.co.kr

<ⓒ투자가를 위한 경제콘텐츠 플랫폼, 아시아경제. 무단전재 배포금지, AI 학습 및 활용 금지>

함께 보면 좋은 기사

새로보기

내 안의 인사이트 깨우기

취향저격 맞춤뉴스

많이 본 뉴스

당신을 위한 추천 콘텐츠

놓칠 수 없는 이슈