En este experimento quería probar algo con expresiones faciales y que funcionara con herramientas nativas de Unreal Engine. Descubrí que generar la cabeza con la boca abierta ayudaba a obtener algunos detalles extra. Crear esas formas de mezcla no fue fácil y este resultado está lejos de ser perfecto. Idealmente quiero 58 referencias de expresiones generadas y que la IA se encargue de eso, jaja. Por cierto, es la primera vez que horneo los detalles de alta poligonización sobre el personaje generado por baja poligonización. ¡Eso funcionó sorprendentemente bien! ¡El resultado final tiene triángulos de 34k! He creado este personaje en 4 partes separadas en Blender y he generado cada una en Hunyuan 3D Studio. Las referencias originales provienen de Nano Banana 2 y Grok. En Trellis 2 en ComfyUI para el texturizado. La animación se hizo con Control Rig en UEFN / Unreal Engine. Con todos los experimentos hasta ahora, la gestión de archivos y versiones empieza a ser un reto. Obtener archivos de diferentes plataformas, cada una con su propia lógica de nombres de archivo. Tendré que buscar algo para mantenerlo más organizado. ¿Alguna sugerencia?

¡Esto es una locura! Con LTX 2 en ComfyUI pude mantener el movimiento original de mi cámara + hacía un lip-sync completo en el canto jaja. Todo funcionando localmente. Hice el vídeo original en 2021, cuando salió Metahumans y estábamos trabajando en Unreal Engine 4. Este videoclip fue una especie de resultado de mis primeros experimentos con Livelink y Control Rig en ese momento. Ahora, la nueva versión mejorada por IA no es perfecta y aún no he entrenado a ningún lora para la consistencia de los personajes. Tampoco tenía ya el archivo de vídeo original, así que descargué la versión de Youtube como entrada, jaja. ¡Sin embargo, el resultado de la cámara + las expresiones faciales son realmente prometedores! Me pregunto cómo manejaría tomos más complejos y rápidos.