Компания ByteDance, владелец TikTok, представила новый ИИ-видеоредактор, который нужно видеть, чтобы поверить.

Компания ByteDance представила новый видеоредактор на основе искусственного интеллекта OmniHuman. Эта модель превращает одну фотографию в полноценное, реалистичное видео. Эти видео демонстрируют убедительное пение, речь и движения.

TikTok, принадлежащий ByteDance, показал нового генератора AI-видео, который может создавать из одной фотографии живого персонажа, говорящего, поющего и движущегося. Модель OmniHuman способна придать изображению потрясающую реалистичность благодаря впечатляющим натуральным движениям тела, мимике лица и жестам.

Разработка OmniHuman потребовала более 18 700 часов обучения на видеоматериалах, что позволило AI моделировать движения, речь и способы взаимодействия людей в видео. Важно отметить, что этот AI может создавать анимацию целого персонажа, а не только лица или верхней части тела. Это означает, что одна фотография может превратиться в видео, на котором человек говорит, танцует или даже играет на музыкальном инструменте.

Независимо от того, является ли создаваемый персонаж из фотографии или из более стилизованной картины, конечный результат выглядит очень реалистично.

Если ByteDance действительно выпустит OmniHuman на рынок, он, скорее всего, станет чрезвычайно популярным в TikTok. Компания уже предоставила на платформе генератор AI-видео под названием Jimeng, и инструмент типа OmniHuman, вероятно, привлечет еще больше пользователей TikTok и его других функций.

Конечно, ByteDance не единственная компания, которая конкурирует в этой области. Sora от OpenAI уже получила признание и является одним из известных продуктов в области AI-видео. Существуют также другие инструменты, такие как Pika, Runway, Pollo и Dream Machine от Luma Labs.

Модель ByteDance имеет множество потенциальных применений: от воссоздания актеров прошлого для создания большего количества фильмов до обучения студентов истории путем моделирования исторических личностей и их повествования. Даже цифровые аватары в социальных сетях и играх могут стать более реалистичными и динамически изменяться в реальном времени в зависимости от ввода пользователя.

OmniHuman пока находится на стадии исследований, но демонстрация его возможностей ByteDance свидетельствует о том, что практическое применение может появиться очень скоро. Возможно, что именно эти AI-персонажи станут лицами следующей популярной тенденции видео в TikTok.