Можно обрезать ролик под любое соотношение сторон в один клик.
Google выпустила инструмент Autoflip с открытым исходным кодом, который позволяет кадрировать видео под разные соотношения сторон. Система сама обрезает ролики, оставляя важное в кадре. Об этом говорится в блоге команды Google AI.
Как отметили в компании, обычно видео в «телевизионных» форматах 16:9 и 4:3 проходят долгий путь, прежде чем добраться до соцсетей. Чаще всего специалистам приходится тратить время, чтобы вручную обрезать ролик так, чтобы нужные элементы всегда оставались в кадре.
По мнению Google, на это уходит время, которое можно было бы потратить на другую работу. Поэтому в компании выпустили Autoflip, который делает то же самое за людей.
Инструмент использует технологии машинного обучения и видеостабилизации. Компьютер сам находит объект в кадре и может отслеживать его даже при смене ракурсов. Для реализации Autoflip в компании использовали фреймворк MediaPipe: за счёт этого кадрирование происходит «на лету».
Как отметили в Google, инструмент автоматически настраивается на каждую новую сцену. Если он находит значительные изменения в композиции, то изолирует кадры, чтобы принять решение, нужно ли применять трекинг или кадр статичный.