← Alle indlæg

· AI

Sådan tester Google AI-agenter, før de får adgang til nettet

En AI-agent, der klikker sig rundt på nettet, skal prøves af på mere end pæne eksempler. Googles spejlinternet peger på en praktisk vej til at finde fejl i agenters adfærd, før den rammer rigtige websites og brugere.

Når en AI-agent skal bruge en browser, er det ikke nok, at den kan svare rigtigt på et spørgsmål. Den skal kunne finde knapper, forstå formularer og gennemføre en opgave uden at misforstå sidens indhold. En fejl kan betyde, at den vælger forkert, afleverer en formular for tidligt eller går i stå.

Google har bygget et stort, kunstigt internet til at afprøve sine Chrome-agenter. Ideen er at lade dem færdes i en kopi af nettet, hvor man kan undersøge, hvordan de klarer forskellige sider og opgaver. Det er et konkret skridt i arbejdet med at gøre browseragenter mere pålidelige.

For webfolk ændrer det spørgsmålet fra, om en agent kan klikke, til om den forstår, hvad den klikker på. En tydelig knaptekst, logisk rækkefølge og synlige fejlbeskeder hjælper både mennesker og software. Hvis en agent ikke kan gennemføre en almindelig opgave på en side, kan det være et tegn på, at sidens struktur også er svær for brugerne.

Et kunstigt testmiljø kan vise gentagne fejl, før en agent møder en rigtig kunde. Men en kopi af nettet kan ikke rumme alle særhederne ved virkelige sider: indhold, der ændrer sig, langsomme indlæsninger eller forskellige samtykkevalg. Resultaterne skal derfor ses som en prøvestand, ikke som bevis for, at agenten fungerer fejlfrit overalt.

Jeg ville bruge samme tanke i produktionen: Lav en håndfuld gennemgående opgaver, og se, om en agent kan løse dem på sitet. Find en vare, bestil et møde, ret en oplysning eller find vilkårene. Notér, hvor den tøver, tager fejl eller har brug for hjælp, og ret siden dér, hvor både mennesker og agenten bliver usikre.

Det er også en nyttig kvalitetskontrol, når et website skal kunne betjenes på flere måder. En agent skal kunne læse sidens indhold og skelne mellem valg, information og handlinger. Det kræver ikke, at alt designes til en maskine; det kræver, at indhold og funktion hænger tydeligt sammen.

Googles spejlinternet handler i sidste ende om at afprøve handlinger, før de får følger. Den tilgang kan webteams tage til sig allerede nu: Definér de vigtige opgaver, prøv dem systematisk af, og brug fejlene til at forbedre siden. Så bliver AI-agenten en ekstra måde at finde svage punkter i den digitale produktion på.

af Kasper Bach · Studio IV