Обновления Kling AI: синхронизация губ, раздел «Сообщества» и API
Kling AI представляет долгожданные улучшения и новые функции. Теперь у пользователей появилась еще больше возможностей для творчества.
1. Функция синхронизации губ
Теперь можно загружать озвучки или песни для видео, и движения губ персонажей будут автоматически синхронизироваться с аудио. Это создает невероятно реалистичный эффект речи или пения персонажа.
- Поддерживается в моделях Kling 1.0 и 1.5, при соблюдении требований к лицевым анимациям.
- Работает для человеческих персонажей (3D/2D), но не для животных.
Как это работает:
- Создаете ролик в Kling или используйте ранее сгенерированный.
- Нажимаете Match Mouth Type.
- Загружаете аудио (можно песню), и Kling AI подгонит движение губ.
2. Сообщества
Kling AI обзавелся разделом «Сообщество», где можно делиться своими проектами и зарабатывать до 666 Inspiration Credits за качественные работы.
- Публикуйте короткометражки, AI-видео или AI-изображения, которые пройдут официальную проверку, и получайте награды. Например, короткие фильмы могут принести до 666 кредитов, видео — до 36, а изображения — до 6.
3. Открытая API-платформа
Теперь API доступен всем без списка ожидания. Платформа поддерживает генерацию видео, изображений и виртуальной примерочной Virtual Try-on с полным рабочим процессом и онлайн-заказами. Есть возможность протестировать API для отладки и интеграции в проекты.
Kling — это китайский аналог Sora, но сейчас явно видно стремление превзойти Runway.
Судите сами:
- Как и Runway с их инструментом Motion Brush в Gen-2, Kling внедрил аналогичный инструмент для движения отдельных объектов в свою модель Kling 1.0. В версии Kling 1.5 эта функция пока отсутствует, так же как и в новом Runway Gen-3.
- Кроме того, Kling, как и Runway, сделали доступным API для своих пользователей.
- А вскоре в Kling планируют добавить ИИ-редактор видео, что сделает их серьезным китайским конкурентом Runway.