Как выглядит захват движений в самой продвинутой нейросети

Но руки - до сих пор проблема) Для устранения этой проблемы есть костыли, как упомянутый Control Net, и фактически все надстройки на Stable Diffusion, это костыли которые помогают ему работать лучше. Сама модель за пол года не изменилась.

Ну в целом все как у людей. При создании анимации один человек делает раскадровку, другой контуры, третий закрашивание, четвертый фоны и т.д.
Например есть даже В-тубер - Нейро-сама. Она тоже состоит из нескольких нейросетей, где одна говорит, другая играет в игры, третья отвечает за анимацию и т.д.
Но прогресс в развитии нейросетей прям совсем уж дикий.

если брать последние года 2, то да, прогресс огромный. Но видно его больше за счёт того, что сейчас нейросети стали продктом, а не научными программами в институтах

Весь научный прогресс сейчас завязан на капитализме. Те же нейросети не появились бы без смартфонов, соцсетей и интернета, благодаря которым они и учатся.

Потому что нейросетей навалом, и каждая из них была научена по разному и для разных целей. По этому в каждой отдельной сфере есть лидеры.

конечно есть, но про них не говорят))

в половине кадров руки заретушированы, чтоб скрыть тот ужас что с пальцами творится)

По большому счету да, фильтр. Ну видно же по волосам - просто обработанное покадрово видео. Хотя, сама штука хорошая и полезная - сделать говорящую голову из фотки, к примеру - быстро, с поворотами, мимикой итп...

Это не совсем постобработка :) Это генерация картинки прямо все как обычно. Конкретно в этом примере было
painting of anime girl wearing gray t-shirt and jeans shorts, long black hair, masterpiece, dynamic lights, delicate details, bright soft diffused light, low saturation, cinematic lights, Ghibli style, urban backgrounds, detailed background, sunny day
При этом модуль ControlNet переносит позу и освещение образца на эту самую сгенерированную anime girl
Т.е. хотя никакого 3d каркаса нет, а есть только генерация по маскам, но то все равно ни фига не фильтр.

Так любое видео состоит из кадров, и любая обработка видео всегда разбивает его на кадры, обрабатывает каждый из них и потом склеивает обратно. По другому никак.

Ага, особенно шнурок на правом ботинке, тоже .... захватил своё )))

Только шнурок? Придраться можно и к блузке, там то бантики какие то, то пуговице, на руке то браслет, то часы цвета хамелеон. И что то с косыми мышцами живота не очень натурально, но это уже совсем придирка к аниме. 8)