V tomto experimentu jsem chtěl vyzkoušet něco s mimikou a nechat to fungovat s nativními nástroji Unreal Engine. Zjistil jsem, že generování hlavy s otevřenou tlamou pomáhá získat nějaké další detaily. Vytváření těchto blend tvarů stále nebylo snadné a tento výsledek je daleko od dokonalosti. Ideálně chci 58 generovaných expression reference a nechat AI, aby to vyřešila haha. Mimochodem, poprvé peču highpoly detaily na low poly generovanou postavu. To fungovalo překvapivě dobře! Konečný výsledek má 34 tisíc trojúhelníků! Tuto postavu jsem sestavil ve 4 samostatných částech v Blenderu a každou část jsem generoval ve studiu Hunyuan 3D. Původní odkazy pocházejí z Nano Banana 2 a Groka. Trellis 2 v ComfyUI kvůli texturování. Animace byla provedena pomocí Control Rigu v UEFN / Unreal Engine. S veškerými dosavadní experimenty se správa souborů a verzí stává výzvou. Získávání souborů z různých platforem, přičemž každá platforma má svou vlastní logiku názvů souborů. Budu muset najít něco, co to udrží lépe organizované. Máte nějaké tipy?

To je šílené! S LTX 2 v ComfyUI jsem si dokázal zachovat původní pohyb kamery + zpěv se mi plně synchronizoval rty, haha. Vše běží lokálně. Původní video jsem natočil v roce 2021, když Metahumans poprvé vyšli a pracovali jsme na Unreal Engine 4. Toto hudební video bylo jakýmsi výsledkem mých prvních experimentů s Livelinkem a Control Rigem v té době. Nová vylepšená verze AI není dokonalá a ještě jsem netrénoval žádnou loru na konzistenci postav. Také jsem už neměl původní video soubor, tak jsem si stáhl Youtube verzi jako vstup haha. Nicméně výsledek kamery + mimika jsou opravdu slibné! Zajímalo by mě, jak by zvládla složitější a rychlejší střely.