En 2021, el equipo de Meta mostró una vista previa de un nuevo proyecto en desarrollo que animaba cualquier cualquier dibujo, o garabato, con personas o personajes. Sí, animaciones a partir de dibujos.
Meta no solo ha avanzado en este proyecto, sino que también está compartiendo su código para que los desarrolladores puedan crear sus propios proyectos o dar vida a nuevas ideas.
Esta herramienta con IA crea personajes animados con tus dibujos
En un artículo anterior, ya comentamos cómo los desarrolladores de Meta estaban utilizando el potencial de la IA para animar las figuras que se mostraban en cualquier dibujo. No requería ningún dibujo sofisticado, ya que el simple dibujo de un niño era suficiente para que la IA creará una animación del personaje:
Nuestros investigadores imaginaron el uso de modelos de detección de objetos, modelos de estimación de poses y métodos de segmentación basados en el procesamiento de imágenes para crear rápidamente una versión digital del dibujo.
Para ello, es necesario ir a este enlace y elegir uno de los dibujos de muestra, o subir un dibujo propio. Y despúes solo hay que seguir una serie de instrucciones. Por ejemplo, para que la herramienta dé el resultado esperado, Meta pide que elijamos solo la parte del dibujo en el recuadro de selección.
Y una vez que escanea la imagen y separa el dibujo del fondo, resalta cuáles serían las articulaciones del personaje para realizar los movimientos. Puede que no hayan quedado en el lugar indicado, así que la herramienta te da la opción de modificarlas según el diseño de tu dibujo.
Cuando terminas de hacer todos estos cambios para que se ajusten a lo que solicita la herramienta, verás que se escanea nuevamente el dibujo para que comience la acción. Puedes elegir una serie de movimientos para dar vida a tu dibujo entre una variedad de animaciones, por ejemplo, para que parezca que está bailando, caminando, saltando, etc.
Meta lanza una versión de código abierto de su herramienta con IA
Desde el lanzamiento de esta herramienta, los usuarios han subido cientos de miles de dibujos que se han usado (con consentimiento) para entrenar a la IA, así que este proyecto cuenta con amplio conjunto de datos.
Y debido a este interes, el equipo de Meta consideró lanzar una versión de código abierto con los modelos y código utilizado en este proyecto:
Al publicar los modelos y el código como código abierto, el proyecto proporciona un punto de partida para que los desarrolladores desarrollen y amplíen el proyecto, fomentando una cultura de innovación y colaboración dentro de la comunidad de código abierto.
Aquellos que deseen usar este código solo tienen que seguir las instrucciones que se detallan en GitHub para su instalación.