Den 18. september 2026 meddelte Anthropic et samarbejde med Accenture, via virksomhedens AI-forretning Faculty, om uafhængig evaluering af de mest avancerede AI-modeller.
Evaluatorer med adgang indefra
Idéen kaldes embedded evaluation. Evaluatorerne arbejder inde i Anthropic med adgang, der ifølge virksomheden kan sammenlignes med en ansats. De kan iagttage modeltræning, følge driftsbeslutninger og tale direkte med medarbejdere. Deres opgave er blandt andet at vurdere, om virksomheden lever op til sine sikkerhedsforpligtelser, at pege på blinde vinkler, at indberette hændelser og at give offentligheden et billede af fordele og risici.
Hvad skal evalueres?
Anthropic nævner tre opgaver: at teste og udfordre modeller (red-teaming), at gennemføre vurderinger af, om modellerne følger deres formål, og at teste modellernes sikkerhedsforanstaltninger.
Flere aktører på vej
Aftalen er ikke eksklusiv. Anthropic er også i dialog med METR og andre nonprofitorganisationer om at afprøve elementer af modellen, og der varsles flere evaluatorer inden for de kommende uger.
