Китай действительно удивляет: представлена нейросеть OmniHuman-1, создающая реалистичные видео из фотографий
Компания ByteDance создала искусственный интеллект, способный преобразовывать изображения в удивительно реалистичные видеоматериалы.
Этот инновационный ИИ, названный OmniHuman, генерирует видеоролики в полный рост, где человек совершает движения и жестикуляции в соответствии с произнесенной речью. Это значительно превосходит предыдущие версии ИИ, которые могли анимировать лишь лица или верхние части тела.
«В области анимации людей произошло значительное развитие в последние годы, — отметили в ByteDance. — Тем не менее, актуальные решения сталкиваются с трудностями при масштабировании до уровня всеобъемлющих моделей, что сдерживает их применение на практике».
Инженеры обучили OmniHuman более чем на 18 700 часах видеоматериалов с участием людей, воспользовавшись новым методом, включающим в учебный процесс разнообразные входные данные: текст, аудиосигналы и двигательные паттерны. Этот подход под названием «всеобщие условия» даёт возможность ИИ обучаться на более разнообразных и обширных наборах данных по сравнению с предыдущими методами.
«Наша ключевая идея состоит в том, что внедрение в обучение множественных сигналов, таких как текст, звук и поза, может существенно сократить потери данных», — пояснили исследователи.
Тестирование показало, что OmniHuman превосходит имеющиеся системы по нескольким критериям. Около большого количества примеров можно узнать здесь.
Также стоит отметить, что недавно китайская корпорация Alibaba выпустила обновлённую версию своей ИИ-модели Qwen 2.5-Max, о которой представители уверенно заявляют, что она превосходит добро зарекомендуюшую себя модель DeepSeek-V3. DeepSeek в свою очередь объявила о запуске обновленной ИИ-модели Janus-Pro-7B.
Источник: iXBT
Похожие статьи
GeForce RTX 5090 вернулись в продажу в США по цене втрое выше рекомендованной
ИИ Muse научился совершать телефонные звонки за человека
Сверло, скрепка и пинцет: как прошивали консоли до эпохи нейросетей
Кроссплатформенный аналог генерации кадров NVIDIA DLSS с поддержкой видеокарт предыдущих поколений
От i486 до MMX: от каких технологий разработчики Linux отказались в 2026 году
Космоплану Dream Chaser разрешили приземляться на Земле как обычному самолёту
Starship пробыл на орбите семь часов: SpaceX готовится впервые поймать корабль башней Mechazilla
Как я разработал на Go демон для управления экраном кулера Ocypus в Linux