OpenAI volgt klikken en toetsaanslagen voor doorzoekbaar ChatGPT-geheugen

Computer History is nu beschikbaar voor de macOS-app van ChatGPT. In plaats van schermafbeeldingen te maken, registreert de functie interactiegebeurtenissen: muisklikken, toetsaanslagen, sneltoetsen en het wisselen tussen programma's. Dat gebeurt via het toegankelijkheidssysteem van macOS, dat oorspronkelijk is ontworpen om mensen met een beperking te helpen met hun computer werken. Screenshots, schermopnames, microfoon- en systeemgeluid worden niet vastgelegd, en activiteit in de privénavigatiemodus van een browser blijft altijd buiten beeld, meldt OpenAI.

Van klikgedrag naar geheugenbestand

De verzamelde gebeurtenissen worden periodiek omgezet in tekstsamenvattingen en lokaal opgeslagen als Markdown-bestanden, een simpel opmaakformaat voor platte tekst. In de tijdlijn worden die samenvattingen per dag en tijdstip gegroepeerd, met vermelding van de gebruikte apps. Dit vormt in feite een geheugenbank waar ChatGPT en Codex later op kunnen terugvallen. Zo kan de chatbot bijvoorbeeld het laatst bewerkte document terugvinden of automatisch een samenvatting van je werkdag opstellen.

Terugkerend werk wordt een automatisering

Een opvallend onderdeel is dat ChatGPT patronen in je activiteit herkent. Zodra de tijdlijn ziet dat je een taak steeds op dezelfde manier uitvoert, stelt het systeem een 'Skill' voor: een sjabloon dat je vervolgens door Codex kunt laten uitwerken tot een automatisering. Dit past in de bredere trend van agentic AI, waarbij AI-systemen niet alleen antwoorden, maar ook zelfstandig taken uitvoeren.

Toestemming, opslag en risico's

OpenAI bouwde een gelaagd permissiemodel voor de functie. In zakelijke omgevingen moet een beheerder Computer History eerst inschakelen; daarna moet iedere gebruiker zelf apart toestemming geven en ook de losstaande Geheugenfunctie van ChatGPT activeren. Gebruikers bepalen zelf via lijsten welke apps en websites wel of niet worden gevolgd, en kunnen de registratie op elk moment pauzeren via de menubalk. De functie is voorlopig niet beschikbaar in de Europese Economische Ruimte, Zwitserland en het Verenigd Koninkrijk.

Tijdelijke bestanden met de ruwe gebeurtenissen worden na 48 uur van de Mac verwijderd. De Markdown-samenvattingen blijven echter onversleuteld op de schijf staan totdat de gebruiker ze zelf wist, wat betekent dat andere programma's op hetzelfde gebruikersaccount ze in theorie kunnen lezen. OpenAI zegt de data op zijn servers niet te bewaren voor training, al kunnen samenvattingen die later als context in een gesprek opduiken alsnog trainingsdata worden, afhankelijk van iemands privé-instellingen. OpenAI waarschuwt zelf voor een verhoogd risico op prompt injection: omdat de functie inhoud van websites en apps meeleest, kunnen kwaadwillige instructies op een pagina ChatGPT of Codex misleiden. Het bedrijf raadt daarom aan de functie uit te schakelen bij gevoelige gesprekken, gezondheids- of financiële apps.