«Резиновое» движение в сгенерированном видео: причины и как уменьшить

Есть характерный дефект видеогенерации, который трудно назвать одним словом: объекты в кадре двигаются так, будто сделаны из мягкого материала. Плечи растягиваются, предметы меняют форму на ходу, границы объектов плавают. В профессиональном обиходе это называют «резиновым» движением.

Откуда берётся эффект

Модель не знает, что объекты твёрдые. У неё нет представления о скелете, суставах или жёсткости материалов — есть только статистика того, как выглядят последовательности кадров.

Когда она достраивает промежуточные состояния между началом и концом движения, она интерполирует видимую форму, а не физическое тело. Если интерполяция проходит через состояние, невозможное физически, модель этого не замечает: локально каждый кадр выглядит правдоподобно.

Где нарушается сильнее всего

• Конечности при большой амплитуде движения: рука, поднимающаяся вверх, может «удлиниться» на промежуточных кадрах.
• Твёрдые предметы в руках: чашка, книга, телефон меняют пропорции.
• Одежда с чёткой геометрией: воротник, лацканы, пуговичная планка.
• Очки: оправа деформируется при повороте головы.
• Архитектурные элементы на фоне: прямые линии изгибаются.

Что снижает эффект

1. Малая амплитуда движения. Чем меньше объект перемещается, тем короче путь интерполяции и тем меньше шансов пройти через невозможное состояние.
2. Медленный темп. То же соображение: медленное движение делит путь на большее число мелких шагов.
3. Короткий ролик. Меньше кадров — меньше накопленных искажений.
4. Отсутствие твёрдых предметов в кадре. Волосы и ткань допускают деформацию естественно, чашка — нет.
5. Простая одежда без выраженной геометрии.
6. Мягкий фон без прямых линий: изогнувшаяся стена заметна, изогнувшаяся крона дерева — нет.

Формулировки, которые помогают

Прямое указание на характер движения работает лучше, чем указание на то, чего не должно быть.

• «Медленное плавное движение» вместо «без деформаций».
• «Небольшой наклон головы» вместо «поворот» — меньше амплитуда.
• «Камера статична, движется только фон» — снимает нагрузку с фигуры.
• «Поза не меняется, движутся только волосы» — явно ограничивает зону изменений.

Выбор кадра под движение

Некоторые композиции сами по себе устойчивы к дефекту. Поясной портрет с руками вне кадра, простая одежда, размытый фон — здесь двигаться будет только лицо и волосы, то есть именно то, что деформируется естественно.

Наоборот, ростовой кадр с человеком в пиджаке, держащим предмет, на фоне здания с прямыми линиями — это набор всего, что даёт «резиновость» одновременно.

Когда эффект допустим

В стилизованных роликах, где реализм не заявлен, лёгкая пластичность движения не мешает и иногда выглядит уместно. Проблема возникает только тогда, когда кадр претендует на фотографичность: несоответствие между реалистичной картинкой и невозможной физикой считывается мгновенно.

Проверка

Просмотрите ролик покадрово в середине движения — именно там интерполяция дальше всего от опорных точек. Проверьте пропорции конечностей, форму твёрдых предметов и прямые линии на фоне. Если в середине всё в порядке, ролик прошёл.