Китай действительно удивляет: представлена нейросеть OmniHuman-1, создающая реалистичные видео из фотографий
Компания ByteDance создала искусственный интеллект, способный преобразовывать изображения в удивительно реалистичные видеоматериалы.
Этот инновационный ИИ, названный OmniHuman, генерирует видеоролики в полный рост, где человек совершает движения и жестикуляции в соответствии с произнесенной речью. Это значительно превосходит предыдущие версии ИИ, которые могли анимировать лишь лица или верхние части тела.
«В области анимации людей произошло значительное развитие в последние годы, — отметили в ByteDance. — Тем не менее, актуальные решения сталкиваются с трудностями при масштабировании до уровня всеобъемлющих моделей, что сдерживает их применение на практике».
Инженеры обучили OmniHuman более чем на 18 700 часах видеоматериалов с участием людей, воспользовавшись новым методом, включающим в учебный процесс разнообразные входные данные: текст, аудиосигналы и двигательные паттерны. Этот подход под названием «всеобщие условия» даёт возможность ИИ обучаться на более разнообразных и обширных наборах данных по сравнению с предыдущими методами.
«Наша ключевая идея состоит в том, что внедрение в обучение множественных сигналов, таких как текст, звук и поза, может существенно сократить потери данных», — пояснили исследователи.
Тестирование показало, что OmniHuman превосходит имеющиеся системы по нескольким критериям. Около большого количества примеров можно узнать здесь.
Также стоит отметить, что недавно китайская корпорация Alibaba выпустила обновлённую версию своей ИИ-модели Qwen 2.5-Max, о которой представители уверенно заявляют, что она превосходит добро зарекомендуюшую себя модель DeepSeek-V3. DeepSeek в свою очередь объявила о запуске обновленной ИИ-модели Janus-Pro-7B.
Источник: iXBT
Похожие статьи
Сибирь может обзавестись системами накопления энергии
50 лет Matrox: путь от плат S-100 до видеокарт Intel ARC
Новая модель Grok 4.7 с 2,1 трлн параметров превосходит предшественника по всем показателям и готовится к релизу
Скандал из-за Mini LED: TCL судится с Samsung за обман покупателей телевизоров
Уникальная стиральная машина Xiaomi с тремя барабанами и другие новинки Mijia покоряют европейский рынок
Рекордный аккумулятор в компактном корпусе: 6,36 дюйма, 8000 мА•ч и две камеры по 200 Мп
Samsung топчется на месте: Galaxy S27 унаследует скорость зарядки семилетнего Galaxy S20
Blue Origin получила контракт NASA на $700 млн для создания марсианской сети связи