Google DeepMind toont Genie 4: realtime werelden met geluid en pratende personages

Genie 4 is wat DeepMind een 'wereldmodel' noemt: software die een omgeving niet vooraf opneemt, maar op het moment zelf opbouwt, beeld voor beeld. Gebruikers bewegen met het toetsenbord door de scène en kunnen met tekstopdrachten ingrijpen in wat er gebeurt, bijvoorbeeld door het weer te veranderen. Het model reageert daar direct op en past de rest van de simulatie aan. Genie 3 liet dit soort interactieve werelden in augustus 2025 al zien, maar miste geluid en sprekende personages. Dat is nu toegevoegd: elke omgeving krijgt eigen achtergrondgeluid, zoals wind door bomen, en personages kunnen onderling praten en reageren op wat de gebruiker doet.

Gemini plant op de achtergrond

Genie 4 bouwt volgens DeepMind voort op het videomodel Gemini Omni, dat zorgt voor realistische beelden en bewegingen. Daarnaast houden andere Gemini-modellen de simulatie consistent. Verandert een gebruiker bijvoorbeeld het weer, dan zorgt Gemini ervoor dat die aanpassing logisch doorwerkt in de rest van de scène. Ook tussen de invoermomenten door stuurt Gemini de ontwikkeling van de wereld, zodat gebeurtenissen ergens toe leiden in plaats van willekeurig te verlopen. Voor complexere taken gebruikt DeepMind het model Gemini 3.8 Flash, dat de scène voortdurend observeert, een doel opdeelt in kleinere stappen en na elk nieuw beeld checkt of een stap is gelukt. Verandert de situatie, dan past het model zijn plan automatisch aan.

Link met robotica en grenzen van het model

DeepMind test ook een variant genaamd Gemini 4 Argon, die de Genie-technologie moet koppelen aan het robotica-onderzoek van het bedrijf, bekend als Gemini Robotics. In een demonstratie deelt Argon het spel dammen op in losse stappen, die Genie 4 vervolgens gebruikt om een virtuele versie van de humanoïde robot Apollo van bedrijf Apptronik het spel te laten 'spelen', zonder dat er een echte robot aan te pas komt. Zulke simulaties kunnen in de toekomst dienen als oefenomgeving waarin robots en AI-systemen leren zonder dat er fysieke proeven nodig zijn. DeepMind benadrukt wel dat Genie 4 nog een experimenteel onderzoeksmodel is. Bij langere sessies of meerdere ingewikkelde aanpassingen kunnen visuele details veranderen of voorwerpen plotseling verdwijnen. Ook realistische fysica en leesbare tekst in de wereld blijven lastig. Toegang is voorlopig beperkt tot een kleine groep testers, maar moet later beschikbaar komen voor abonnees van Google AI Ultra via de Project Genie-webapp en voor partners met vroege toegang tot de Gemini API. Al het gegenereerde beeld en geluid krijgt de onzichtbare watermerktechniek SynthID, waarmee Google AI-content herkenbaar maakt.