Преимущества модели First Order Motion Model по сравнению с другими методами анимации:
- Не требуется конкретная информация об объекте. 3 В отличие от других методов, модели не нужна детальная информация об объекте на изображении (например, 3D-модель). 3 Она может анимировать различные объекты, такие как лица или тела, без предварительных подробных знаний о них. 3
- Обучение на видео. 3 Система обучается на множестве видеороликов с движущимися объектами и понимает, как обычно двигаются разные объекты. 3
- Разделение внешнего вида и движения. 3 Модель отделяет внешний вид объекта на неподвижном изображении от того, как он движется в видео. 3 Это помогает точно анимировать неподвижное изображение. 3
- Обработка сложных движений. 3 Для моделирования сложных движений используется набор точек (ключевых точек) и их движений, что делает анимацию естественной. 3
- Обработка окклюзии. 3 Модель может угадывать, какие части объекта скрыты на неподвижном изображении, но становятся видимыми в анимации, делая финальное видео более реалистичным. 3
Недостатки модели First Order Motion Model:
- Нестабильные результаты. 14 Это связано с тем, что предсказатель ключевых точек не требует каких-либо знаний о ключевых точках во время обучения. 14
- Необходимость предположения, что объекты в исходном и видео имеют похожие позы. 4 Без начального грубого выравнивания модель может выдавать положения ключевых точек, физически невозможные для анимируемого объекта. 4