Вебинары Разобраться в IT Реферальная программа
Программирование Аналитика Дизайн Маркетинг Управление проектами
11 Окт 2024
2 мин
32

Представлен Pyramid Flow — новый продвинутый видеогенератор на основе ИИ с открытым исходным кодом.

Количество моделей для генерации видео на базе ИИ продолжает расти. Новая модель Pyramid Flow создает качественные видео до 10 секунд с открытым исходным

Главное:

  • Представлена новая модель ИИ-генерации видео — Pyramid Flow.
  • Pyramid Flow генерирует видео до 10 секунд и имеет открытый исходный код.
  • Разработана совместно Пекинским университетом и Kuaishou Technology.

Что такое Pyramid Flow?

Pyramid Flow — это революционная модель генерации видео на основе искусственного интеллекта, которая предоставляет возможность создавать высококачественные ролики продолжительностью до 10 секунд все с тем же высоким визуальным качеством, которое предлагают платные системы. Эта модель была сконструирована с использованием новой технологии, позволяющей генерировать видео поэтапно. В отличие от традиционных моделей, где каждое видео создается в полном разрешении сразу, Pyramid Flow начинает с низкого разрешения и лишь на завершающем этапе оформляет видео в полном качестве. Это нововведение значительно сокращает вычислительные затраты и время, необходимое для генерации.

Преимущества и недостатки модели

Согласно исследованиям, Pyramid Flow демонстрирует быстрое время генерации видео: ее способность создавать 5-секундное видео с разрешением 384p составляет всего 56 секунд. Это сопоставимо с аналогичными моделями, однако Gen-3 Alpha Turbo от Runway остается лидером в скорости. Важно отметить, что Pyramid Flow открывает великолепные возможности для разработчиков и копирайтеров. В отличие от многих дорогих альтернатив, таких как Gen-3 Alpha или Dream Machine от Luma, Pyramid Flow доступна для загрузки и использования в коммерческих проектах. Однако, несмотря на множество преимуществ, у качества видео есть свои ограничения — нехватка продвинутых возможностей по тонкой настройке при создании роликов, что дает конкурентам преимущество.

Технологическая основа Pyramid Flow

Как отмечают исследователи, модель Pyramid Flow основана на концепции пирамидального сопоставления потоков. Этот метод позволяет существенно сократить количество необходимых токенов для эффективного обучения, и, как следствие, повысить производительность на этапе генерации. В процессе обучения модель использовала наборы данных с открытым исходным кодом, такие как LAION-5B и WebVid-10M, собрав около 10 миллионов однофреймовых видеороликов. Это дает пользователям возможность не только творчески развиваться, но и сократить расходы на генерацию видео, которые могут достигать тысяч долларов при использовании более традиционных решений.

Pyramid Flow — это шаг вперед в мире технологий генерации видео. Я был бы рад услышать ваше мнение об этой модели и ее перспективы. Как вы думаете, сможет ли она завоевать аудиторию, привыкшую к платным решениям, или недостаток настроек станет решающим фактором в её дальнейшей судьбе?

Добавить комментарий