Foundry heeft Nuke 14.0 gelanceerd, een update van de visuele effecten software die een nieuw USD-gebaseerd 3D-architectuur, verbeteringen aan UnrealReader en AIR tools en een bibliotheek met machine learning-modellen bevat. De update verbeterde ook de prestaties van de AIR-tools en omvatte Cattery, een bibliotheek met gratis, open-source machine learning-modellen die native in Nuke kunnen worden uitgevoerd.
Met Climate NeRF kun je realistische videos maken van fysieke fenomenen zoals smog, sneeuw en overstromingen in bepaalde omgevingen, door middel van het combineren van fysische simulaties en NeRF-modellen.
Deze paper onderzoekt hoe een tekst-naar-video generator kan worden getraind met slechts één tekst-video-paar door het gebruik van een T2I diffusion model en de nieuwe methode Tune-A-Video met Sparse-Causal Attention. Deze methode kan tijd-coherente video’s genereren voor verschillende toepassingen.
Muse is een efficiënt model voor het genereren van afbeeldingen op basis van tekst dat state-of-the-art prestaties behaalt en direct verschillende afbeeldingbewerkingsapplicaties mogelijk maakt.
De autheurs van Text2Mesh ontwikkelden een framework dat de gebruiker toestaan om op een intuïtieve manier de stijl van 3D objecten te bewerken op basis van een gewenste tekstbeschrijving.
Epic onthult de technische kant van MetaHuman Creator Face Rigs. De nieuwe whitepaper van Epic Games legt de technische kant uit van Rig Logic, een runtime facial rig evaluation solver system dat wordt gebruikt door Epic’s MetaHuman Creator tool.
The Champion is de eerste volledige bioscoopfilm die naar het Engels is omgezet met behulp van neural rendering. Door gebruik te maken van vooruitgang in AI en machine learning zijn in de hele film de gezichten van de acteurs vervangen door een afgeleide versie, visueel opgebouwd uit acteurs die de dialoog opnieuw opnemen in een geluidsstudio.
Eidos Montreal introduceerde een nieuwe techniek die automatisch emoties detecteert uit de gezichtsopnames, en deze gebruikt om emotie-curves te genereren, die als input voor een motion matching systeem gebruikt kunnen worden om de body language van de characters te doen passen bij de conversaties die op eender welk moment gaande zijn.
Eidos Montreal introduceerde een nieuwe techniek die automatisch emoties detecteert uit de gezichtsopnames, en deze gebruikt om emotie-curves te genereren, die als input voor een motion matching systeem gebruikt kunnen worden om de body language van de characters te doen passen bij de conversaties die op eender welk moment gaande zijn.
Om efficient een grote kwantiteit aan high-detail faces te genereren ontwikkelden ze bij Guerilla Games een “Gene Splicer” tool, waarmee ze kunnen blenden tussen features, en verschillende mensen. Binnen deze blogpost kijken we kort naar waarom ze hiervoor gekozen hebben.