Google maakt video-analyse met AI tot 88% zuiniger met nieuwe Gemini-functie

Google DeepMind lanceert vandaag 'agentic video understanding', een nieuwe functie voor de Gemini-modellen 3.7 Flash, 3.6 Flash en 3.5 Flash-Lite. De techniek verandert de manier waarop kunstmatige intelligentie video's analyseert. Waar het model tot nu toe elke video in een vast tempo doorspitte, meestal één beeld per seconde, kan het nu zelf beslissen welke momenten belangrijk zijn en die extra grondig bekijken.

Het verschil zit in de aanpak. Bij de oude, 'statische' methode verwerkt agentic AI een video als een strip pasfoto's: elk plaatje krijgt evenveel aandacht, ongeacht of er iets spannends gebeurt. Dat kost bij lange video's, denk aan een lezing van anderhalf uur, enorm veel rekenkracht. Bij de nieuwe methode doorzoekt Gemini eerst globaal de beelden, het geluid en eventuele ondertitels, en duikt daarna dieper in de fragmenten die ertoe doen. Soms bekijkt het model een cruciale seconde zelfs in slow motion, door tijdelijk meer beelden per seconde te bekijken.

Tot 88% minder rekenkracht nodig

Volgens Google levert deze aanpak grote besparingen op. Op standaardtests voor video-analyse daalt het gebruik van AI-tokens, de rekeneenheden waarin taalmodellen informatie verwerken, met tot 88%. De kosten voor bedrijven die de technologie via de Gemini API gebruiken, dalen met tot 66%. Tegelijkertijd verbetert de nauwkeurigheid van de antwoorden met tot 7%. Die winst is het grootst bij lange video's, van tutorials van tien minuten tot meerdere uren durende opnames, waar de oude methode ontwikkelaars dwong te kiezen tussen torenhoge rekenkosten of het missen van belangrijke details.

Nieuwe toepassingen

De technologie opent volgens Google deuren voor taken die eerder lastig waren. Zo kan het model precies het moment vinden waarop iets in een video verandert, tot op een fractie van een seconde nauwkeurig, wat automatisch videomonteren mogelijk maakt. Ook wordt afwijkingsdetectie beter: door interessante momenten opnieuw en sneller af te spelen, spot de AI subtiele fouten of snelle bewegingen die het anders zou missen. Verder kan Gemini nauwkeuriger tellen hoe vaak een actie of object in een video voorkomt, en vragen beantwoorden over uren durende opnames zonder torenhoge rekenkosten. Deze laatste toepassing, het vinden van specifieke informatie in een berg videomateriaal, staat ook wel bekend als momentherkenning.

De functie is vanaf nu beschikbaar voor ontwikkelaars via Google AI Studio en het Gemini Enterprise Agent Platform, voor zowel geüploade video's als YouTube-content. Er zijn geen extra kosten aan verbonden; de standaard tarieven voor de Gemini API gelden. Google kondigt aan dat de techniek de komende maanden ook naar gewone gebruikers komt, via de Gemini-app en de 'Ask YouTube'-functie op YouTube.