Face Mocap

Face Mocap App detecta caras usando la cámara de tu celular,

es capaz de detectar expresiones/gestos faciales.

Detecta tu cara en tiempo real y envía esos datos a tu computadora,

puedes controlar un personaje animado en un motor de videojuegos como Unreal Engine(example source available), Unity o cualquier otro software. Incluso puedes usarlo para implementar un control para mover la camara en un simulador.

Documento con informacion de los datos enviados via tcp :

http://motion.mx/ue4/AndroidFaceMocap/FaceMocapDataStructure.pdf

Los datos de detecciones se envían usando el protocolo TCP,

los datos se transmiten en forma de texto simple sin ningún tipo de encriptación para facilitar su consumo.

Puedes usar cualquier cliente tcp para conectarse con FaceMocap app. La aplicación funciona como servidor esperando conexiones remotas a quienes enviara los datos cada frame de ejecución.

*Esta app utiliza arcore

*Actualmente no soporta detección de ojos(iris) o pestañeo

Ve el video demo y descarga el proyecto Unrel Engine con sources (descarga en la descripcion del video):

https://www.youtube.com/watch?v=RTn3qus_V5I

Unete al canal discord (en ingles)

https://discord.gg/Zm6k4xpH