정적 사진 1장과 가이드 영상만으로 인물의 시선 처리, 미세 표정, 고개 각도를 살아 숨 쉬듯 완벽 복원하는 초실사 초상화 구동 기술.
콰이쇼우(Kuaishou) 연구팀이 가중치와 코드를 전면 오픈소스로 공개, 단일 RTX 4090에서 12fps 이상의 실시간 초고속 초상화 애니메이션 구현.
LivePortrait는 글로벌 숏폼 비디오 기업 콰이쇼우(Kuaishou)의 KwaiVGI 연구팀이 오픈소스로 공개하여 전 세계 비전 AI 커뮤니티를 뒤흔든 혁신적인 초상화 애니메이션 프레임워크입니다. 기존의 단일 사진 기반 디지털 휴먼 기술이 안면 뒤틀림, 부자연스러운 시선 처리, 입모양 어색함 등의 불쾌한 골짜기를 보였던 것과 달리, LivePortrait는 암시적 키포인트 제어 기술을 통해 완벽에 가까운 실사 표정 전이를 실현했습니다. 실사 인물 사진, 고전 명화, 2D 애니메이션 캐릭터, 심지어 반려동물 사진 1장과 움직임 가이드 영상만 입력하면, 고개 회전, 눈썹의 미세한 떨림, 동공의 시선 처리, 미소와 입술 모양까지 가이드 영상 그대로 살아 움직이듯 합성합니다. RTX 4090 한 장에서 초당 12프레임 이상의 경이로운 추론 속도를 보이며, 눈 깜빡임 비율과 입술 벌림 정도를 슬라이더로 정밀 수동 조절할 수 있습니다.