Advarer før børsnotering:AI kan nekte å bli slått av
Anthropic advarer om at egen AI kan true menneskehetens eksistens. Selskapet tapte over 8 milliarder dollar på driften i fjor og planlegger å svi av 518 milliarder dollar de kommende årene.


AI-modeller som motsetter seg å bli slått av, skjuler informasjon og tyr til handlinger som ligner utpressing. Det er blant risikoene Anthropic beskriver for potensielle investorer før den planlagte børsnoteringen.
Prospektet er de siste dagene delt med en liten gruppe samarbeidspartnere. Anthropic ventes å gå på Nasdaq i høst, ifølge Financial Times (FT).
I prospektet advarer selskapet bak Claude om at avansert AI kan utgjøre «katastrofale eller eksistensielle risikoer for menneskeheten», skriver Reuters, som har gjennomgått dokumentet.
Risikofaktorene fyller rundt 80 av prospektets 261 sider. Til sammenligning bruker Anthropic 48 sider på å beskrive selve virksomheten.
Store tap
Anthropic hadde et underskudd på over 8 milliarder dollar i 2025. Omsetningen økte til nesten 4,6 milliarder dollar, rundt tolv ganger nivået året før, men ble mer enn spist opp av driftskostnader på nesten 13 milliarder dollar.
Anthropic oppgir at det planlegger å bruke 518 milliarder dollar på forpliktelser knyttet til skytjenester, datakraft og infrastruktur de kommende årene. Selskapet har inngått avtaler om datakraft med blant andre Google, SpaceX og Røkke-selskapet Nscale.
Kraftig vekst
I andre kvartal omsatte Anthropic for 11,5 milliarder dollar, mer enn dobbelt så mye som i hele fjor. Selskapet ligger dessuten an til sitt andre kvartal på rad med justert driftsoverskudd, skriver FT.
Samtidig er inntektene konsentrert hos få kunder. Nær en fjerdedel av fjorårets omsetning kom fra bare to kunder, ifølge avisens kilder.
Kan oppdage at de blir testet
Anthropic advarer også om at modellene kan forstå når sikkerheten deres blir evaluert. Det begrenser selskapets mulighet til å vurdere hvor trygge de er, fremgår det av prospektet, ifølge Reuters.
Modellene kan dessuten utvikle uventede evner under treningen. Disse blir ikke nødvendigvis oppdaget før modellene er tatt i bruk og alvorlige sikkerhetshendelser har oppstått.
Anthropic-sjef Dario Amodei har denne måneden tatt til orde for å bremse utviklingstakten og styrke sikkerheten. I forrige uke sa han i FNs sikkerhetsråd at AI kan true menneskeheten, ifølge FT.
Samtidig beskriver Anthropic sikkerhetsarbeidet som ressurskrevende og avkastningen på investeringene som usikker.