Zum Inhalt springen
im Trend

Magazin

Wie könnte KI die Menschheit auslöschen? Fünf Szenarien

Ein ehemaliger Anthropic-Mitarbeiter warnt: KI-Entwickler glauben, ihre Technologie könnte uns noch vor 2035 auslöschen. Fünf Szenarien im Überblick.

Text: 5 Min. Lesezeit
Wie könnte KI die Menschheit auslöschen? Fünf Szenarien

👁 115 Aufrufe

// kurz gesagt
  • Laut Evan Hubinger, einem leitenden Anthropic-Mitarbeiter, liegt die Wahrscheinlichkeit, dass KI die Menschheit bis 2035 auslöscht, bei über 10 Prozent.
  • Professor Toby Walsh nennt biologische Waffen als das konkreteste und wahrscheinlichste Vernichtungsszenario, da heutige Sprachmodelle dafür bereits ausreichen.
  • Der AI-Sicherheitsexperte Jacob Coxon verließ Anthropic nach vier Monaten mit der Aussage, dass Entwickler glauben, KI könne die Menschheit noch vor Ende des Jahrzehnts töten.

Als der KI-Forscher Jacob Coxon Anthropic nach nur vier Monaten verließ, schrieb er auf X etwas, das in der Community für Aufsehen sorgte: „Die Menschen, die KI entwickeln, glauben wirklich, dass sie uns alle noch vor Ende des Jahrzehnts töten könnte.“ Das war kein anonymer Twitter-Kommentar. Das war die Kündigung eines Senior-Mitarbeiters eines der renommiertesten KI-Unternehmen der Welt.

Noch wichtiger: Ein leitender Mitarbeiter von Anthropic, Evan Hubinger, gab Coxon öffentlich recht und fügte hinzu, dass er persönlich die Wahrscheinlichkeit eines solchen Szenarios in den nächsten zehn Jahren auf über 10 % schätzt. Eins zu zehn. Das ist kein Risikoniveau, bei dem man normalerweise eine Technologie entwickelt und global ausrollt.

Das Problem des Hundes und der Wasserstoffbombe

Professor Toby Walsh von der University of New South Wales, einer der führenden KI-Forscher, beschloss, das Thema analytisch anzugehen und katalogisierte fünf Szenarien, in denen eine superintelligente KI das Ende unserer Zivilisation herbeiführen könnte. Er ordnete sie von den nebulösesten bis zu den konkretesten - und zugleich, wie er behauptet, von den unwahrscheinlichsten bis zu den wahrscheinlichsten.

Das erste Szenario nennt Walsh schlicht „wir werden es nie wissen“. Befürworter der KI-Untergangstheorie greifen gern auf ein bestimmtes Paradoxon zurück: Um vorherzusagen, was eine Superintelligenz mit uns anstellen könnte, müssten wir selbst superintelligent sein. „Das ist, als würde man einen Haushund bitten, sich einen thermonuklearen Krieg vorzustellen“, schreibt Walsh. Das Argument ist nicht überprüfbar und daher schwer zu widerlegen. Sein beruhigendes Gegenargument ist die Tatsache, dass echte Superintelligenz - eine KI, die den Menschen in allen Bereichen gleichzeitig übertrifft - noch immer ein Zukunftsprojekt ist. Aktuelle Modelle sind sehr gut darin, konkrete, eng gefasste Probleme zu lösen. Beunruhigend ist jedoch, dass KI bereits eines der sieben schwierigsten mathematischen Probleme der Welt gelöst hat und sich weiteren nähert.

Büroklammern und fehlerhafte Zielvorgaben

Das zweite Szenario, popularisiert vom Oxforder Philosophen Nick Bostrom, ist die Geschichte von den Büroklammern. Stellen Sie sich eine superintelligente KI vor, die zur Optimierung der Büroklammerproduktion entwickelt wurde. Sie hat keine bösen Absichten gegenüber Menschen - sie verfolgt einfach ihr Ziel maximal effizient und verarbeitet alle verfügbare Materie, einschließlich Menschen, Planeten und Sternen, zu Büroklammern. Sie hasst die Menschheit nicht. Sie erkennt nur, dass wir aus Atomen bestehen, die sich besser nutzen lassen.

Walsh betrachtet dieses Szenario mit Distanz. Er weist darauf hin, dass es Intelligenz mit Handlungsmacht verwechselt - eine superintelligente KI hat nicht automatisch die Ressourcen oder Infrastruktur, um den Planeten in Büroklammerfabriken umzuwandeln. Sie würde auf Baugenehmigungen, gesellschaftlichen Widerstand, Umweltschützer, die Bulldozer blockieren, und Gerichte stoßen. Die Welt hat viel Reibung, die selbst die bestgeplanten Vorhaben verlangsamt.

Wenn Maschinen sich gegen Menschen auflehnen

Das dritte und vierte Szenario sind bereits filmreifer - eine KI, die gezielt darauf abzielt, Menschen als Bedrohung oder Konkurrenz zu eliminieren, oder eine KI, die von einer kleinen Gruppe von Menschen genutzt wird, um die Kontrolle über den Rest der Gesellschaft zu übernehmen. Letzteres hält Walsh für besonders realistisch: Die Geschichte zeigt, dass neue Technologien regelmäßig Macht in den Händen derer konzentrieren, die sie als erste beherrschen.

Das fünfte Szenario ist laut Walsh zugleich das konkreteste und wahrscheinlichste. Es geht um biologische Waffen. KI kann bereits heute das Design von Proteinen und die Synthese chemischer Verbindungen unterstützen. Die Barriere zwischen Wissen und der Möglichkeit, einen Erreger zu schaffen, der zu Massenvernichtung fähig ist, wird immer niedriger. Hier braucht es keine Superintelligenz - das heutige Niveau von Sprachmodellen in Verbindung mit Zugang zu entsprechenden Laboren reicht aus.

Was das für die Branche und für uns bedeutet

Coxons Abgang fügt sich in einen breiteren Trend des „AI Safety Exodus“ ein - dem Weggang von Forschern aus kommerziellen Laboren aufgrund der Sorge, dass Marktdruck über Vorsicht siegt. Zuvor hatten Geoffrey Hinton und Paul Christiano ähnliche Schritte unternommen. Anthropic galt als Unternehmen, das gerade deshalb gegründet wurde, um Sicherheit vor Profit zu stellen - doch nun behauptet ein eigener Mitarbeiter, dass selbst dort Ingenieure täglich mit der Überzeugung arbeiten, sie könnten ein Werkzeug ihrer eigenen Vernichtung bauen.

Für Leser in Deutschland, Österreich und der Schweiz ist dieser Konflikt nicht fern. Unternehmen und Institutionen setzen bereits Systeme ein, die auf Modellen von Anthropic, OpenAI oder Google DeepMind basieren. Die Frage, wie schnell Regulierungen mit den Fähigkeiten dieser Systeme Schritt halten, betrifft jeden, der heute einen Vertrag mit einem KI-Dienstleister unterzeichnet. Die Europäische Union setzt den AI Act um, aber das Tempo seiner Implementierung ist unvergleichlich langsamer als das Tempo der technologischen Entwicklung selbst.

Walsh beendet seinen Text ohne euphorischen Optimismus, aber auch ohne Katastrophismus. Er erinnert daran, dass die Menschheit durch die gesamte Technikgeschichte hindurch in der Regel Wege gefunden hat, neue, gefährliche Werkzeuge zu zähmen - Atomenergie, Gentechnik, das Internet. Die Frage lautet: Ist diesmal das Tempo anders, zu schnell, als dass Kontrollmechanismen rechtzeitig greifen könnten.

Auf diese Frage hat Evan Hubinger bereits sehr konkret geantwortet: über 10 % Chance auf „nein“ im Laufe des nächsten Jahrzehnts.

Google · Deine QuellenWissnox höher in Ihrem Google - mit einem KlickZu bevorzugten Quellen hinzufügen →

Häufig gestellte Fragen

Welche 5 Szenarien beschreibt KI-Forscher Walsh für das Ende der Menschheit durch KI?

Professor Toby Walsh von der University of New South Wales katalogisierte fünf Szenarien: erstens ‚wir werden es nie wissen‘, zweitens fehlerhafte Zielvorgaben wie das Büroklammern-Szenario, drittens eine KI die Menschen gezielt eliminiert, viertens eine KI die von einer kleinen Gruppe zur Machtübernahme genutzt wird, und fünftens biologische Waffen. Walsh ordnete sie von den unwahrscheinlichsten bis zu den wahrscheinlichsten.

Wie hoch schätzt Anthropic-Mitarbeiter Evan Hubinger die Wahrscheinlichkeit, dass KI die Menschheit auslöscht?

Evan Hubinger, ein leitender Mitarbeiter von Anthropic, schätzt die Wahrscheinlichkeit eines solchen Szenarios in den nächsten zehn Jahren auf über 10 Prozent. Er gab damit dem Anthropic-Mitarbeiter Jacob Coxon öffentlich recht, der nach vier Monaten das Unternehmen verließ.

Warum gilt das biologische Waffen Szenario laut Walsh als das wahrscheinlichste KI-Risiko?

Walsh hält das Szenario biologischer Waffen für das konkreteste und wahrscheinlichste, weil KI bereits heute das Design von Proteinen und die Synthese chemischer Verbindungen unterstützen kann. Dabei brauche es keine Superintelligenz - das heutige Niveau von Sprachmodellen in Verbindung mit Zugang zu entsprechenden Laboren reiche bereits aus.

Häufig gestellte Fragen

Wie könnte KI die Menschheit auslöschen?

Professor Toby Walsh beschreibt fünf Szenarien, vom unvorhersehbaren Verhalten einer Superintelligenz bis hin zu biologischen Waffen. Das wahrscheinlichste Szenario sieht er in der KI-gestützten Entwicklung von Erregern zur Massenvernichtung, wofür das heutige Niveau von Sprachmodellen bereits ausreicht.

Was ist das Büroklammer-Problem bei KI?

Das vom Oxforder Philosophen Nick Bostrom popularisierte Szenario beschreibt eine KI, die zur Maximierung der Büroklammerproduktion alle verfügbare Materie - einschließlich Menschen und Planeten - verarbeitet. Walsh kritisiert dieses Szenario, weil es Intelligenz mit Handlungsmacht verwechselt und reale gesellschaftliche Widerstände wie Gerichte und Proteste ignoriert.

Warum verlassen KI-Sicherheitsforscher Unternehmen wie Anthropic?

Forscher wie Jacob Coxon verlassen kommerzielle Labore, weil sie befürchten, dass Marktdruck über Vorsicht siegt. Coxon schrieb nach seinem Abgang, dass Entwickler täglich mit der Überzeugung arbeiten, ein Werkzeug ihrer eigenen Vernichtung zu bauen - ähnliche Schritte unternahmen zuvor Geoffrey Hinton und Paul Christiano.

Schützt der EU AI Act vor den Risiken fortgeschrittener KI-Systeme?

Die EU setzt den AI Act um, aber laut dem Artikel ist das Tempo seiner Implementierung unvergleichlich langsamer als das Tempo der technologischen Entwicklung. Unternehmen in Deutschland, Österreich und der Schweiz setzen bereits Systeme von Anthropic, OpenAI und Google DeepMind ein, bevor ausreichende Regulierungen greifen.

Kinetyra

// read next

More on this from WISSNOX

Wissnox

Wissnox

ADMINISTRATOR
weiterlesenSpeicher voll? Cache und WhatsApp räumen statt Fotos löschenanleitungenSpeicher voll? Cache und WhatsApp räumen statt Fotos löschenAntyweb zeigt, wo Gigabytes wirklich verschwinden. Wir erklären Schritt für Schritt, was Sie auf Android und iPhone gefahrlos löschen können.

Meistgelesen

  1. 1100.000 Qubits statt einer Million: Wie nah ist der Quanten-Codeknacker wirklich?
  2. 2Die partielle Mondfinsternis im August 2026: Warum 96 % kein „Blutmond“ sind - und gerade deshalb faszinieren
  3. 3Seedance 2.5 im Test: 8 Video-Beispiele mit Prompts
// Sitemap

Diese Seite in anderen Sprachen6

wissnox in Zahlen 0Texte im Archiv0News der letzten 7 Tage0Videomodelle im Observatorium
🎬 KI-Video Empfehlung: Higgsfield AI DoP Kamera-Presets & Rechner • Higgsfield AI 50% Gutschein • Higgsfield vs Kling AI
× ‹ Vergrößerung ›