Bueno hola de nuevo videoedicionistas (?)

Hoy vengo a preguntaros algo, he visto el otro día algo interesante, se llama FaceRig, si no lo conocéis merece la pena echarle un ojete. https://www.facerig.com/

Bueno, es interesante, es divertido, pero no es del todo útil, consume recursos y el factor "a tiempo real" no le permite ofrecer un rendimiento del todo fino. (Da grandes resultados para ser lo que es, pero para un reconocimiento facial serio, se queda corto)

Aquí llega mi pregunta, todos hemos visto el reconocimiento facial del cine, con puntos de referencia físicos en la cara del actor, véase EstefantasticovideodeBenedictCuberbachrestregandoseporelsuelo como referencia. Pero ¿Es posible hacer lo mismo, con la tecnología de facerig, para simular movimiento y expresión, en un elemento 3d o una animación en primer plano? sin ningún tipo de anclaje físico, por supuesto.

La idea entonces es, utilizar un vídeo ya grabado de alguien en primer plano hablando, cambiando de expresión y moviendo la cabeza, analizar los movimientos y pasarlos a un modelo 3d.

He encontrado lip sync y esas cosas, esta bien, pero no se forma a partir de un vídeo.

¿Alguien tiene alguna idea?

Ambicioso y muy interesante. A ver si alguien sabe algo...