Alle Depeschen

DepescheBranche

Anthropics Alignment-Chef nennt über 10 Prozent Auslöschungsrisiko

Anthropics Leiter der Alignment Science, Evan Hubinger, schrieb am 9. September 2026 auf X, er halte es für über zehn Prozent wahrscheinlich, dass KI im kommenden Jahrzehnt alle Menschen tötet. Er antwortete damit dem Anthropic-Forscher Jacob Coxon, der am Abend zuvor gekündigt und Anthropic wie OpenAI einen unverantwortlichen Wettlauf zur Superintelligenz vorgeworfen hatte.

Coxon veröffentlichte einen Faden aus sieben Beiträgen, abgesetzt am 9. September 2026 um 0:04 Uhr UTC, also am Abend zuvor in San Francisco. Er habe die vergangenen drei Jahre Pretraining-Forschung bei OpenAI und Anthropic betrieben, schreibt er dort; keines der beiden Unternehmen handle verantwortlich: „They are racing straight to self-improving superintelligence and gambling with our lives.“

Seine Begründung trennt die beiden Häuser. Bei OpenAI hätten viele die zivilisatorische Tragweite nicht verinnerlicht; bei Anthropic sei sie verstanden, das Haus sehe sich aber in einem Wettlauf, den es selbst gewinnen müsse, weil sonst niemand verantwortlich handeln werde. Den Einstieg in dieses Endspiel nennt er einen überheblichen Einsatz, der nicht aus dem Slack eines Privatunternehmens heraus begonnen werden sollte.

Hubinger, bei Anthropic Leiter der Alignment Science, antwortete um 1:27 Uhr UTC direkt auf den Faden: „Jacob is correct here—we really do earnestly believe AI could kill all humans! I personally think it is >10% within the next decade.“ Anthropic versuche sein Bestes, habe aber keinen Plan, wie sich die Ausrichtung einer Superintelligenz lösen lasse, und sei auch nicht erkennbar auf dem Weg dorthin.

Zwei Stunden später schränkte Hubinger ein: Von den heutigen Modellen gehe ein vergleichsweise geringes Risiko aus, seine Sorge gelte künftigen Systemen, die sich rekursiv selbst verbessern. Anthropic äußerte sich als Unternehmen weder zur Kündigung noch zu der Zahl. Coxon gab dem Wall Street Journal zusätzlich ein Interview.

Beide Angaben sind persönliche Einschätzungen, keine Messungen. Im August 2026 hatte Anthropic im eigenen Risikobericht das Misalignment-Risiko von sehr niedrig auf niedrig hochgestuft.