Alibaba открыла бета-доступ к модели генерации видео Wan3.0. Она создает ролики длительностью до 30 секунд, принимая на вход не только текст и изображения, но и PDF-файлы, веб-страницы и презентации PowerPoint. Это вдвое превышает максимальную длину видео, которую поддерживала предыдущая версия Wan2.5.

Wan3.0 работает с текстом, изображениями, видео и аудио одновременно. Один запрос может включать до десяти изображений, пять видеороликов и пять аудиоклипов. Модель также рекомендует оптимальную длину видео на основе запроса и имеет инструмент расширения, позволяющий удлинять уже существующие ролики. Благодаря поддержке документов и веб-страниц, статические данные можно превращать в динамическое видео, что открывает новые возможности для создания обучающих материалов и презентаций.

РазрешениеStandard (за сек.)Prime (за сек.)30 сек (Standard)30 сек (Prime)
480p$0.05$0.068$1.50$2.04
720p$0.10$0.14$3.00$4.20
1080p$0.20$0.28$6.00$8.40

Одной из ключевых проблем генеративного видео является визуальный дрейф и искажения, особенно при отображении лиц и пользовательских интерфейсов. В Alibaba утверждают, что Wan3.0 решает эту проблему, сохраняя согласованность деталей из исходных материалов — персонажей, реквизита и пространственного расположения. Это достигается за счет более точного учета контекста при генерации.

Модель обрабатывает до 10 изображений, 5 видео и 5 аудиоклипов одновременно.

Wan3.0 доступна через сайт wan.video, Alibaba Cloud Model Studio и API на Qwen Cloud. Предусмотрены два тарифа: Standard и более быстрый Prime. Стоимость генерации 30-секундного ролика в разрешении 1080p составляет $6 для Standard и $8.40 для Prime, при этом в настоящее время действует скидка 30% на тариф Standard.

Alibaba позиционирует Wan3.0 для широкого спектра применений: от ускорения кинопроизводства до создания коротких драм и контента для соцсетей. Бизнес может использовать модель для генерации маркетинговых и обучающих видео, а разработчики — для создания реалистичных симуляций для тренировки автономных транспортных средств и робототехнических систем.

Запуск Wan3.0 происходит на фоне резкого увеличения инвестиций Alibaba в ИИ. Компания недавно объявила о крупнейшем размещении акций среди гонконгских компаний для финансирования своих ИИ-проектов, а на прошлой неделе сообщила о падении квартальной прибыли на 75% в годовом выражении из-за роста затрат на ИИ. Это подчеркивает стратегическую важность для Alibaba развития собственных моделей генеративного ИИ, включая Wan3.0, которая должна составить конкуренцию таким продуктам, как Sora от OpenAI и другим генераторам видео.