AniPortrait
AI 비디오 · 비디오 생성 완전 오픈소스 무료

AniPortrait

오디오 및 인체 포즈 시퀀스를 기반으로 극도로 자연스러운 안면 근육 표정과 상반신 움직임을 생성하는 텐센트 오픈소스 프레임워크.

도구 만족도 100%
41 명 참여

무료 혜택 및 이용 규칙

텐센트 연구팀이 오픈소스로 공개, 단일 사진과 오디오 또는 포즈 스켈레톤을 결합해 초실사 인물 동작 비디오 생성.

기능 상세 분석 및 특징

AniPortrait는 텐센트(Tencent) 연구팀이 학계와 공동 개발하여 오픈소스로 공개한 차세대 고품질 인물 애니메이션 합성 프레임워크입니다. 이전 세대의 발화 모델들이 안면 경계면의 떨림이나 부자연스러운 표정 왜곡을 보였던 것과 달리, AniPortrait는 2단계 확산 모델(Diffusion Model) 파이프라인을 통해 실사 영화 수준의 자연스러운 인물 동영상을 생성합니다. 오디오 신호로부터 3차원 안면 랜드마크와 고개 회전 궤적을 정밀 추출한 뒤, 디퓨전 모델이 시간적 일관성을 유지하며 렌더링합니다. 발음과 완벽히 일치하는 입모양뿐만 아니라 자연스러운 고개 끄덕임, 눈 깜빡임, 어깨의 미세한 움직임까지 복원하며, 오디오 구동 모드와 포즈 스켈레톤 영상 구동 모드를 모두 지원합니다.

실측 장단점 평가

핵심 장점

  • ✓ 오디오 음성 기반 자동 생성 모드와 포즈 스켈레톤 기반 정밀 제어 모드를 모두 지원하는 뛰어난 유연성
  • ✓ 디퓨전(Diffusion) 모델 기반으로 깜빡임 없는 안정적인 배경과 사실적인 피부 텍스처 유지
  • ✓ 코드와 가중치가 전면 오픈소스로 공개되어 ComfyUI 커스텀 파이프라인 연동 및 2차 개발에 최적

유의사항 및 한계점

  • ✕ 디퓨전 기반의 프레임별 노이즈 제거 연산이 수행되므로 로컬 GPU 사양과 추론 시간이 다소 요구됨
  • ✕ 로컬에서 구동하려면 Python/PyTorch 환경 설정 및 여러 대용량 사전 학습 가중치 다운로드 필요

직접 체험해 볼 준비가 되셨나요?

아래 버튼을 눌러 공식 플랫폼에서 바로 사용해 보세요.

열기 AniPortrait ↗

유사한 추천 대안 도구

💬 토론 및 댓글

GitHub Powered