Wan 2.2: 선도적인 AI 비디오 생성 모델

Wan 2.2는 알리바바에서 개발한 AI 창작 플랫폼으로, 인공 지능을 통해 창작 작업의 장벽을 낮추도록 설계되었습니다. 텍스트-이미지, 이미지-이미지, 텍스트-비디오, 이미지-비디오 및 이미지 편집과 같은 기능을 제공합니다.

Wan 2.2란 무엇입니까?

Wan 2.2는 알리바바의 시각적 생성 모델의 중요한 업그레이드 버전으로, 현재 오픈 소스화되었습니다. 이 릴리스는 향상된 기능, 더 나은 성능 및 뛰어난 시각적 품질을 제공하며, MoE 아키텍처, 데이터 스케일링, 영화적 미학 및 효율적인 고화질 하이브리드 TI2V와 같은 기술 혁신을 통합하는 데 중점을 둡니다.

주요 특징 및 기능:

영화적 비전 제어: 조명, 색상 및 구도를 세밀하게 제어하여 전문적인 영화적 내러티브를 달성합니다.
광범위한 움직임: 향상된 유동성과 제어력으로 다양한 복잡한 움직임을 손쉽게 재현합니다.
정확한 프롬프트 추종: 복잡한 장면 및 다중 객체 생성을 위한 프롬프트를 더 잘 이해하고 실행합니다.
Wan Box 프로젝트: 이미지 및 비디오 생성 및 편집을 포함한 다양한 제작 작업을 단일 인터페이스 내에 통합합니다.

Wan 2.2는 어떻게 작동합니까?

Wan 2.2에는 여러 가지 기술 혁신이 통합되어 있습니다.

MoE 아키텍처: MoE(Mixture-of-Experts) 아키텍처를 비디오 확산 모델에 도입합니다. 이는 전문적인 전문가 모델을 사용하여 시간 경과에 따른 노이즈 제거 프로세스를 분리하여 전반적인 모델 용량을 늘리는 동시에 계산 효율성을 유지합니다. A14B 모델 시리즈는 초기 단계에서 높은 노이즈 전문가를 사용하고 비디오 세부 사항을 개선하기 위해 낮은 노이즈 전문가를 사용하는 두 명의 전문가 디자인을 사용합니다.
데이터 스케일링: Wan 2.1에 비해 훨씬 더 큰 데이터 세트(+65.6% 더 많은 이미지와 +83.2% 더 많은 비디오)에서 훈련되어 모션, 의미 및 미학 전반에 걸쳐 모델의 일반화를 향상시킵니다.
영화적 미학: 조명, 구도 및 색상에 대한 세분화된 레이블이 있는 큐레이트된 미적 데이터를 통합하여 보다 정확하고 제어 가능한 영화 스타일 생성을 가능하게 합니다.
효율적인 고화질 하이브리드 TI2V: 고급 Wan2.2-VAE로 구축된 5B 모델을 오픈 소스화하여 16×16×4의 압축률을 달성합니다. 이 모델은 720P 해상도에서 24fps로 텍스트-비디오 및 이미지-비디오 생성을 모두 지원하며 4090과 같은 소비자 등급 그래픽 카드에서 실행할 수 있습니다.

오픈 소스 가용성

Wan 2.2는 오픈 소스화되어 강력한 기능, 더 나은 성능 및 뛰어난 시각적 품질을 제공합니다. 오픈 소스 릴리스에는 다음이 포함됩니다.

Wan2.2-T2V-A14B: 주요 평가 차원에서 주요 상용 모델을 능가하는 480P 및 720P 해상도에서 5초 비디오 생성을 지원합니다.
Wan2.2-I2V-A14B: 이미지-비디오 생성을 위해 설계되어 보다 안정적인 비디오 합성 및 다양한 스타일의 장면에 대한 향상된 지원을 달성합니다.
Wan2.2-TI2V-5B: 720P 해상도에서 24fps로 텍스트-비디오 및 이미지-비디오 생성을 모두 지원하며 단일 소비자 등급 GPU에서 실행할 수 있습니다.

Wan Box: Wan에서 모든 것을, 무엇이든 창조하세요

Wan Box를 사용하면 사용자는 이미지 생성, 비디오 생성 및 비디오 편집을 포함한 다양한 창작 작업을 시작할 수 있습니다. 타임라인을 사용하여 클립을 스플라이스하고 추가 생성을 수행하여 유연한 비디오 클립 편집을 제공합니다.

Wan 2.2가 중요한 이유는 무엇입니까?

Wan 2.2는 AI 기반 창작 비디오 생성에 대한 진입 장벽을 낮추어 산업 및 학술 분야 모두에서 고급 기능을 활용할 수 있도록 합니다. 오픈 소스 특성은 해당 분야의 협력과 혁신을 촉진합니다.

Wan 2.2의 실제 작동 예:

영화적 장면: 영화적 요소를 세밀하게 제어하여 멋진 비디오를 만듭니다. 예로는 햇빛이 비치는 숲 속의 젊은 남자, 스포트라이트가 비치는 무대를 가로지르는 기차, 거울 반사가 있는 에스컬레이터 위의 사람이 있습니다.
역동적인 움직임: 힙합 댄스, 스트리트 파쿠르, 피겨 스케이팅과 같이 복잡하고 유동적인 움직임을 특징으로 하는 비디오를 생성합니다.
상상력이 풍부한 시나리오: 미니어처 수족관이 들어 있는 비눗방울을 부는 여성과 다채로운 꽃을 피우는 정원 호스를 사용하는 여성과 같이 독특하고 시각적으로 인상적인 장면을 제작합니다.

최첨단 모델과의 비교

Wan 2.2는 Wan-Bench 2.0에서 주요 폐쇄 소스 상용 모델과 비교되었으며 여러 중요한 차원에서 뛰어난 성능을 보여주었습니다. 이는 고급 기능을 강조하고 AI 비디오 생성 분야의 리더로 자리매김합니다.

Wan 2.2는 어디에서 사용할 수 있습니까?

Wan 2.2는 다음을 포함한 다양한 응용 분야에 적합합니다.