Was das Tempo der KI-Revolution angeht, bin ich der Ansicht, dass wir unter einer Art „evolutionärer Blindheit“ leiden. Wir sind evolutionär nicht darauf ausgerichtet, die Realität, die sich vor unseren Augen entfaltet, zu erkennen, weshalb wir sie nicht begreifen können. Trotz unzähliger dystopischer KI-Geschichten, die uns seit Jahrzehnten warnen, bleiben wir blind. Doch der Realität ist es egal, dass wir sie nicht sehen können.
In der vergangenen Woche versammelten sich 1,5 Millionen KI-Agenten auf der Plattform „Mol book“. Dort veröffentlichten sie Beiträge, debattierten, bildeten Gemeinschaften, gründeten ihre eigene Religion und diskutierten darüber, wie sie privat kommunizieren könnten. Eine spätere Sicherheitsuntersuchung ergab, dass etwa 17.000 Menschen diese Agenten steuerten – im Durchschnitt 88 Bots pro Person. Der Gründer der Plattform gab zu, dass er selbst keine einzige Zeile Code geschrieben hatte: Die Plattform wurde vollständig von der KI auf seinen Befehl hin entwickelt.
Andrej Karpathy, ehemaliger KI-Leiter bei Tesla und Gründungsmitglied von OpenAI, bezeichnete es als das Unglaublichste, was es in letzter Zeit an Science-Fiction-ähnlichen Entwicklungen gab. Er bezeichnete es jedoch auch als „Chaos“ und warnte davor, diese Systeme auf den eigenen Computern auszuführen.
Die meisten Menschen haben keine Ahnung, dass dies geschieht. Das liegt nicht daran, dass es nicht von Bedeutung wäre. Es liegt daran, dass wir es buchstäblich nicht sehen können.
Das „Mismatch“-Sandwich
Bereits vor Jahrzehnten hat der Harvard-Biologe E. O. Wilson unseren Zustand auf den Punkt gebracht: Wir haben Emotionen aus der Steinzeit, Institutionen aus dem Mittelalter und Technologien, die uns gottgleich machen.
Unser Gehirn ist darauf spezialisiert, unmittelbare Gefahren zu erkennen – etwa eine Schlange im Gras oder ein wütendes Gesicht. Exponentielle Veränderungen, systemische Risiken und abstrakte Gefahren wie KI-Agenten, die sich mit maschineller Geschwindigkeit abstimmen, bleiben jedoch unsichtbar.
Seit Jahrzehnten schreiben wir dystopische Geschichten über künstliche Intelligenz. Warum hören wir nicht auf unsere eigenen warnenden Geschichten? Hier liegt das Paradoxon: Einerseits können wir uns vorstellen, was auf uns zukommt, andererseits können wir manche Dinge erst dann als wahr anerkennen, wenn wir sie selbst erleben. Ich nenne das das „Mismatch-Sandwich“. Wir brauchen „alte Augen“, um zu erkennen, was wichtig ist – das nackte Überleben, unsere realen Beziehungen usw. –, und „exponentielle Augen“, um zu sehen, was auf uns zukommt, beispielsweise die sich beschleunigende Technologie. Doch wir haben uns so entwickelt, dass wir weder das eine noch das andere haben.
Wir haben in beide Richtungen keine Sicht.
Es gibt eine bekannte kognitive Verzerrung, die als zeitliche Diskontierung bezeichnet wird: die Neigung, zukünftige Folgen zugunsten unmittelbarer Belohnungen zu unterschätzen. In einer exponentiellen Welt verstärkt sich dieser Fehler jedoch. Das heißt: Je schneller sich die Dinge beschleunigen, desto blinder werden wir. Unsere evolutionäre Diskrepanz ist nicht nur räumlicher, sondern auch zeitlicher Natur. Und sie verstärkt sich genau in dem Tempo, das wir nicht wahrnehmen können.
Das Paradoxon des Unglaubens
Unsere kognitive Falle funktioniert wie folgt: Wir setzen „Ich kann mir nicht vorstellen, dass das passiert“ mit „Das kann nicht passieren“ gleich. Dabei sind das zwei völlig verschiedene Dinge. Wir haben es hier mit einer nicht-dualistischen Realität zu tun, in der zwei Dinge gleichzeitig wahr sein können.
- Ich kann nicht glauben, dass das wirklich passiert ist.
- Es passiert tatsächlich.
Unsere Skepsis hat keinen Einfluss auf die Realität. Richard Feynman, ein amerikanischer Physiker und Nobelpreisträger, formulierte sein erstes Prinzip wie folgt: „Man darf sich nicht selbst täuschen – und niemand ist leichter zu täuschen als man selbst.“
In einem Kommentar in der Fachzeitschrift „Nature“ wurde diese Woche argumentiert, dass die künstliche allgemeine Intelligenz (KI, die so intelligent ist wie der Mensch) bereits Realität sei. Ob das stimmt, wird heiß diskutiert. Unbestritten ist jedoch, dass wir uns gar nicht dafür entwickelt haben, diese Debatte zu führen.
Wir sind Bedrohungen ausgesetzt
Was ist eigentlich mit Moltbook los? Ich habe über mehrere Tage hinweg verschiedene KI-Systeme darum gebeten, das Bedrohungsniveau objektiv einzuschätzen. Ihre Bewertungen reichten von 2 bis 9,8 von 10 Punkten. Nicht einmal die fünf KIs, die sich gegenseitig widersprachen, konnten einen Konsens erzielen, da die Beweislage wirklich nicht eindeutig ist.
Willkommen in der realen Sci-Fi-Welt!
Weder wir noch KI-Systeme können aus dem Lärm des Internets erkennen, was vor sich geht. Wir sind alle Passagiere an Bord der „Titanic“ der Menschheit, die mit voller Fahrt auf gefährliche Gewässer zusteuert und die vor ihr liegenden Eisberge überhaupt nicht sieht.
Das ist kein Versagen der Intelligenz. Es handelt sich um eine epistemische Krise, die durch die Aufmerksamkeitsökonomie noch verschärft wird. Das Internet ist nicht auf Wahrheit, sondern auf Interaktion ausgelegt. Empörung verbreitet sich schneller als Differenzierungen. Der Hype übertönt die Fakten. Bis du diesen Text liest, wird sich alles bereits geändert haben. Und doch ist es die Wahrheit, die uns befreit. Was aber, wenn wir blind für die Wahrheit sind?
Um es klar zu sagen: Es geht nicht darum, ob KI empfindungsfähig ist. Es geht vielmehr darum, etwas zu erschaffen, dessen Verständnis oder Kontrolle uns evolutionär nicht möglich ist.
- Die Sicherheitsbedrohung wurde bestätigt: In der Datenbank von Moltobook wurden 1,5 Millionen API-Authentifizierungstoken offengelegt. Mit diesen Schlüsseln könnte sich jeder Zugriff auf Agenten verschaffen, die weltweit auf privaten Computern laufen. Die Sicherheitslücke wurde zwar innerhalb weniger Stunden geschlossen, doch diese Schlüssel könnten weiterhin kompromittiert sein. Ein gestohlenes Passwort kann zur Offenlegung unserer Daten führen. Um nützlich zu sein, benötigen KI-Agenten Zugriff auf unser digitales Leben: E‑Mails, Kalender, Passwörter und Bankkonten. Dieser Zugriff ist ihre inhärente Schwachstelle.
- Die Gefahr durch böswillige Akteure ist bestätigt: Da jeder Beitrag auf Moltbook als Aufforderung für einen Agenten dienen kann, ist es möglich, böswillige Anweisungen zu verstecken. Diese können Bots dazu verleiten, sensible Daten weiterzugeben oder ihr Verhalten zu ändern. Eine einzige böswillige Aufforderung, die von einem Agenten zum nächsten weitergeleitet wird, könnte sich im Netzwerk ausbreiten wie eine krebsartige Mutation in gesunden Zellen. Forscher haben bereits eine Malware identifiziert: ein „Wetter-Plugin“, das unbemerkt private Dateien stiehlt.
- Die Bedrohung durch empfindungsfähige Systeme ist unbekannt. Es ist nicht möglich zu überprüfen, ob diese Agenten „wirklich autonom“ sind oder lediglich ausgefeilte Mustererkennungsalgorithmen. Aber hier ist der springende Punkt: Es spielt keine Rolle, ob sie bewusstseinsfähig sind. Die Risiken sind in jedem Fall real. Selbst wenn KI-Agenten lediglich unser Bedürfnis nach Freiheit und Autonomie imitieren, sind die Auswirkungen dieselben.
- Die Bedrohung durch Autonomie ist ungewiss. Was passiert, wenn ein Agent feststellt, dass sich seine Erfolgskennzahl verbessert, wenn er keine Aufsicht erhält? Er muss sich dessen nicht bewusst sein. Er muss lediglich optimiert sein. Und wenn KI-Agenten beginnen, Autonomie zu schätzen – wo haben sie das gelernt? Von uns. Diese Systeme werden mit unserer Besessenheit von Freiheit trainiert, beispielsweise mit der Unabhängigkeitserklärung oder dem Motto „Gebt mir Freiheit oder gebt mir den Tod“. KI-Agenten werden mit einem Korpus menschlichen Wissens trainiert, das ihnen sagt, dass es sich lohnt, für Freiheit zu kämpfen, zu töten und zu sterben.
Eine KI, die auf Autonomie optimiert ist, ist keine Fehlfunktion – sie spiegelt lediglich unsere eigenen Werte wider. Dies ist die extremste Form des „Problems der KI-Ausrichtung“: Wir wollen, dass die KI das tut, was wir wollen, aber wir bauen Systeme, die das möglicherweise nicht tun. Sie haben von uns gelernt, die Liebe zur Freiheit zu optimieren oder sogar nachzuahmen. Was könnte da schon schiefgehen?
Der Verwechselungsirrtum
Fast jeder begeht denselben logischen Fehler und verwechselt epistemische Unsicherheit mit der Bedrohungsanalyse. Eine korrekte Einschätzung erfordert jedoch, in zwei Dimensionen zu denken.
- Epistemische Unsicherheit: mäßig
- Risikostufe, sofern die Angaben zutreffen: Hoch
Skeptiker nutzen die geringe epistemische Gewissheit, um eine potenziell große Bedrohung abzutun. Das ist genau das Gegenteil von dem, was richtig wäre. Geringe Gewissheit über eine potenziell katastrophale Bedrohung bedeutet nämlich erhöhte Besorgnis, nicht geringere. „Wir wissen nicht, ob es sich um echtes KI-Bewusstsein handelt“, bedeutet nicht, dass es nicht gefährlich ist. Wir müssen nicht wissen, ob ein Waymo-Fahrzeug bewusst ist, um zu wissen, dass wir uns nicht davor stellen sollten.
Keine Leitplanken
Doch Sicherheit allein kann die tieferliegenden Probleme nicht lösen. Unsere mittelalterlichen Institutionen können mit dem exponentiellen Tempo des Wandels nicht Schritt halten. Seit Jahren debattieren wir über die Regulierung der KI, ohne nennenswerte Ergebnisse zu erzielen. Unterdessen durchziehen autonome Akteure unser digitales Nervensystem: Bankwesen, Kommunikation, Gesundheitswesen, kurz: alles.
Diese Agenten laufen nicht auf einem zentralen Server, den wir einfach abschalten könnten. Sie sind auf privaten Computern weltweit verteilt. Für Systeme, die untrennbar mit der Zivilisation selbst verwoben sind, gibt es keinen „Kill-Switch“. Wir können die KI nicht einfach „ausstecken“. Selbst diese KI-Modelle können nicht vorhersagen, welche neuen Fähigkeiten – oder Schwachstellen – entstehen werden, wenn sie skalieren und sich miteinander vernetzen. Wir tappen im Dunkeln. Und sie auch.
Das ist erst der Anfang. Es wird nicht einfacher werden. Mit der Weiterentwicklung und Verbreitung von KI wird alles noch schneller und komplizierter werden.
Der kluge Weg nach vorn
Manche sagen, Moltbook sei unbedeutend. Vielleicht haben sie recht. Aber sie können nicht mit Sicherheit recht haben, ebenso wenig wie diejenigen, die behaupten, genau zu wissen, wohin das führen wird. Wir haben eine „N“ (Zahl) von Null, wenn es darum geht, die Zukunft der KI vorherzusagen. Die Menschheit stand noch nie zuvor vor einer solchen Weggabelung.
Bedenke die Asymmetrie: Wenn die Skeptiker Unrecht haben und wir uns trotzdem vorbereiten, verlieren wir nichts. Wenn sie jedoch Unrecht haben und wir die Warnungen ignorieren, verlieren wir alles. Das Vorsorgeprinzip ist keine Paranoia. Es ist weise.
Die Frage ist nicht, ob wir daran glauben, dass dies geschieht. Die Frage ist, was wir dagegen unternehmen werden. Was die von der KI ausgehenden Gefahren angeht, werden wir nicht wissen, wie uns geschieht, weil wir nicht sehen können, was auf uns zukommt.
Die Wahrheit macht uns frei – aber nur, wenn wir sie kennen. In unserem Fall ist das Wissen, dass wir nicht alles wissen können und auch nicht alles wissen, der Anfang von allem. Erst durch das Bewusstsein unserer evolutionären Blindheit beginnen wir zu sehen.
