Kling - новый генератор видео с искусственным интеллектом, о котором все говорят

Sora от OpenAI - это безумие.

Но KWAI только что выпустила модель, похожую на Sora, под названием KLING, и люди сходят по ней с ума.

Вот 10 ярких примеров, которые вы не захотите пропустить:

1. Китаец сидит за столом и ест лапшу палочками для едыpic.twitter.com/MIV5IP3fyQ

— Злой Том (@AngryTomtweets) 6 июня 2024 г.

Клинг появляется на сцене вскоре после выпуска  Vidu , еще одного китайского инструмента для создания видео с искусственным интеллектом, разработанного Shengshu Technology и Университетом Цинхуа.  Vidu генерирует более короткие видеоролики, но может создавать очень реалистичные и детализированные видеоролики с помощью технологии Universal Vision Transformer (U-ViT), которая уже доказала свое превосходство над Runway и Pika.

Со своей стороны, Kling использует передовые технологии 3D-реконструкции лица и тела для создания реалистичных движений на основе единого изображения всего тела.  Это также позволяет избежать других распространенных проблем, с которыми сталкиваются некоторые видеогенераторы искусственного интеллекта при изображении людей, таких как лишние или невозможно изогнутые конечности.

Как и Сора, Клинг также лучше понимает физику реального мира, позволяя более точно моделировать физические взаимодействия между объектами.  Он также предназначен для точного следования подсказкам и создания последовательностей снимков с несколькими видами, что позволяет создавать более сложные и динамичные видеоролики.

Куайшоу выпустил  серию демонстрационных видеороликов,  показывающих, как Клинг будет рендерить сцены, продемонстрированные OpenAI с Сорой.  Видео показались очень реалистичными, с хорошими композициями сцен и движениями.  Качество превосходило Runway и Pika с точки зрения реалистичности и согласованности, и  было на одном уровне с Sora  — даже превосходя его в некоторых поколениях.

Некоторые пользователи поделились другими творениями в социальных сетях, и они кажутся достаточно убедительными, чтобы оправдать шумиху.

Kling в настоящее время доступен в виде публичной демо-версии в Китае через лист ожидания, но Kuaishou обещает более широкий глобальный релиз.

Веб-сайт Kling написан на китайском языке, и, похоже, для регистрации требуется китайский номер телефона. Вам также нужно будет загрузить приложение Kwaicut и следовать инструкциям, показанным на официальном веб-сайте Kling-AI, прежде чем занять место в очереди.

До тех пор для тех, кто хочет создавать видео с искусственным интеллектом, лучшим выбором будут Pika Labs, RunwayML и — для локальной генерации —Stable Video Diffusion.