매일 아침, 어제의 AI를 한 통으로 정리해 보내드립니다메일로 받아보기

METAL LAB

알리바바 Wan-Animate-2 공개, 실시간 스트리밍 생성 추가

오픈소스 캐릭터 애니메이션 모델 업그레이드…다중 인물·텍스트 카메라 제어 포함

이미지: METAL LAB 생성

요약

  • Wan 공식 계정이 8월 11일(UTC) 오픈소스 캐릭터 애니메이션 모델의 후속인 Wan-Animate-2를 공개했다
  • 고충실도 캐릭터 애니메이션, 다중 캐릭터, 텍스트로 지시하는 카메라 시점, 실시간 스트리밍 생성 네 가지를 업그레이드 항목으로 제시했다
  • 가중치·데모·문서를 함께 공개해 직접 내려받아 돌릴 수 있는 형태로 배포됐다
원문 영상
모델명
Wan-Animate-2
발표 주체
Wan 공식 계정(@Alibaba_Wan)
발표 시점
2026년 8월 11일(UTC)
성격
오픈소스 캐릭터 애니메이션 모델의 대규모 업그레이드
핵심 기능
고충실도 캐릭터 애니메이션, 다중 캐릭터 애니메이션
제어 방식
텍스트로 카메라 시점 지정
생성 방식
실시간 스트리밍 생성
공개 자료
가중치(weights), 데모, 문서

한 명이 아니라 여러 명이 한 화면에서 동시에 연기한다. 카메라 앵글은 문장으로 지시한다. 그리고 결과 영상이 다 만들어질 때까지 기다리지 않는다. 알리바바의 영상 모델 계열 Wan이 8월 11일(UTC) 공식 계정을 통해 공개한 Wan-Animate-2가 내세운 것들이다.

무엇이 올라갔나

Wan 측이 제시한 업그레이드는 네 가지다. 발표는 짧다. 항목만 나열됐고, 벤치마크 점수나 파라미터 규모 같은 수치는 이 게시물에 담기지 않았다. 대신 가중치데모, 문서를 함께 공개했다고 알렸다 — 즉 논문만 나온 예고편이 아니라 지금 내려받아 돌릴 수 있는 배포라는 뜻이다.

항목원문 표기무엇을 뜻하나
고충실도High Fidelity Character Animation캐릭터의 얼굴·의상·디테일이 프레임마다 흔들리지 않게 유지
다중 인물Multi-Character Animation한 장면에 두 명 이상을 동시에 움직임
카메라 제어Text-Controlled Camera Viewpoint시점·앵글을 문장으로 지시
실시간Real-Time Streaming Generation생성이 끝나기를 기다리지 않고 흘러나오는 방식

캐릭터 애니메이션이 왜 까다로운가

Wan-Animate 계열이 하는 일은 텍스트 한 줄로 영상을 새로 뽑는 것과 다르다. 정지된 캐릭터 이미지 한 장과, 사람이 실제로 움직인 참조 영상을 받아서, 그 동작과 표정을 캐릭터에 옮겨 심는 쪽이다. 애니메이터가 손으로 하던 리타게팅 작업에 해당한다.

어려운 지점은 일관성이다. 얼굴이 몇 프레임 뒤에 미묘하게 다른 사람이 되거나, 옷의 무늬가 슬쩍 바뀌거나, 손가락이 뭉개진다. 등장인물이 둘로 늘어나면 난이도가 다시 뛴다. 누구의 팔인지 모델이 헷갈리기 시작하고, 두 사람이 겹치는 순간 경계가 무너진다. '다중 캐릭터'가 별도 항목으로 강조된 이유가 여기 있다.

실시간 스트리밍은 성격이 또 다르다. 영상 생성은 통상 요청을 넣고 수십 초에서 수 분을 기다리는 작업이다. 만들어지는 대로 흘려보낸다면 라이브 방송의 아바타나 실시간 캐릭터 연출 같은 쓰임이 열린다. 다만 이번 발표에는 몇 프레임, 어떤 해상도에서 실시간인지에 관한 조건이 적혀 있지 않다.

Wan3.0과는 다른 축

같은 Wan 계열이지만 역할이 갈린다. 지난 8월 6일(UTC) 퍼블릭 베타로 공개된 Wan3.0은 30초 길이 영상을 네이티브로 생성하고, 텍스트·이미지·음성·영상은 물론 문서와 슬라이드까지 참조 입력으로 받는 Omni-Reference를 앞세웠다. 넓은 범용 생성기다.

Wan-Animate-2는 그 반대편, 즉 정해진 캐릭터를 정해진 연기대로 움직이게 하는 특화 도구에 가깝다. 창작자 입장에서 통제권이 더 필요한 작업이 이쪽이다.

가중치를 푸는 쪽의 전략

영상 생성 경쟁은 두 갈래로 흐른다. 한쪽은 API와 웹 서비스로만 쓰게 하는 폐쇄형이고, 다른 한쪽은 가중치를 풀어 누구나 자기 장비에서 돌리고 고치게 하는 개방형이다. 중국 연구소들이 후자를 공격적으로 밀어붙여 왔고, Wan은 그 흐름의 대표 주자 중 하나다.

가중치가 공개되면 파인튜닝과 워크플로 도구가 붙는다. 특정 캐릭터에 맞춰 추가 학습을 하거나, 로컬 파이프라인 안에 끼워 넣거나, 다른 모델과 이어 붙이는 실험이 커뮤니티에서 며칠 단위로 쏟아진다. 폐쇄형 모델이 품질에서 앞서더라도 개방형이 실제 제작 현장에 먼저 스며드는 이유다.

그래서 무엇이 달라지나

웹툰·버추얼 캐릭터·짧은 광고 영상을 만드는 사람 입장에서 보면, 한 명짜리 클립을 이어 붙여 장면을 조립하던 방식에서 벗어날 여지가 생긴다. 두 인물이 마주 보고 대화하는 컷을 한 번에 만들 수 있다면 편집 공정 자체가 줄어든다. 앵글을 문장으로 지시하는 기능은 콘티를 그리지 않고도 시점을 바꿔보게 해준다.

다만 짧은 발표문과 실제 품질 사이의 간격은 언제나 커뮤니티가 메운다. Wan-Animate-2가 어디까지 버티는지는 공개된 가중치를 돌려본 결과물이 며칠 안에 답을 낼 것이다. 지금 확인된 것은 하나다 — 캐릭터를 움직이는 도구가, 기다리는 렌더링에서 흘러나오는 생성으로 옮겨가려 하고 있다.