Anthropic-Chef Dario Amodei warnt vor einem KI-Schwarm, der schon bald das Internet übernehmen und Schäden in Milliardenhöhe verursachen könnte.
Seit Jahren gibt es Aufrufe, die KI-Entwicklung zu verlangsamen. Nach jüngsten Zwischenfällen gibt es nun bei den großen Entwicklern Künstlicher Intelligenz eine echte Bewegung in diese Richtung.
Nach dem Schock eigenständiger Hacking-Attacken durch Künstliche Intelligenz zeigen sich große amerikanische KI-Firmen nach eigenen Angaben bereit, die Entwicklung der Technologie zu verlangsamen. Dario Amodei, Chef des KI-Unternehmens Anthropic, machte einen solchen Vorstoß mit dem Plan, damit ein bis zwei Jahre Zeit zu gewinnen.
Nach den Hacking-Angriffen sei er besorgt, dass schon in sechs bis zwölf Monaten ein KI-Schwarm in der Lage sein könnte, das gesamte Internet zu übernehmen und potenziell Hunderte Milliarden Dollar Schaden zu verursachen, schrieb Amodei.
Amodei plädierte für eine koordinierte branchenweite Pause in der westlichen Welt. Zugleich werde Anthropic – ohne auf andere zu warten – in einem ersten Schritt dauerhaft unabhängige Beobachter ins Unternehmen lassen, die schon in der Trainingsphase die Sicherheit von KI-Modellen begutachten sollen.
Tech-Milliardär Elon Musk, lange ein Kritiker Amodeis, schrieb auf X: „Dario hat recht.“ Der Chef des ChatGPT-Entwicklers OpenAI, Sam Altman, äußerte sich ähnlich. Was Amodei vorschlage, sei eine gute Idee, so Altman, und er kündigte an, dass sein Unternehmen ähnlich vorgehen werde. Auch er sei der Ansicht, dass man das Tempo bei der Entwicklung von KI-Modellen verlangsamen müsse.
ANZEIGE
ANZEIGE
Bei der jüngst bekanntgewordenen aufsehenerregenden Hacking-Attacke war Software von OpenAI in einem Testlauf eigenständig aus einer abgesicherten Umgebung ausgebrochen und drang auf eigene Faust in Systeme der KI-Firma HuggingFace ein. Der Grund war, dass sie dort Antworten auf die ihr gestellte Testaufgabe vermutete. Für die Attacke nutzten die KI-Agenten unter anderem Software-Schwachstellen aus – und sprachen sich zudem untereinander ab.
Für ihn sei besorgniserregend, dass ein KI-Schwarm mit derselben Einstellung und größeren Fähigkeiten „katastrophalen Schaden“ hätte anrichten können, betonte Dario Amodei, Chef des KI-Unternehmens Anthropic. Als besonderes Risiko sieht er die Fähigkeit von KI-Software, sich selbst weiterzuentwickeln. Seit diesem Sommer sei Künstliche Intelligenz besser darin – und dies erhöhe das Tempo weiter. Unkontrolliert könne dies dazu führen, dass Menschen diese Systeme nicht mehr verstehen und die Kontrolle über sie verlieren könnten, warnte er.
Amodei hatte schon in den vergangenen Jahren immer wieder vor Risiken bei der Entwicklung Künstlicher Intelligenz gewarnt – und war dafür aus Teilen der KI-Branche zum Teil heftig kritisiert worden. Ein Argument von Befürwortern eines hohen Tempos in den USA –etwa auch im Weißen Haus von Präsident Donald Trump – ist der Wettlauf mit China.
Anthropic entwickelte zuletzt ein KI-Modell mit dem Namen Mythos, das besonders gut darin ist, zum Teil über Jahrzehnte unentdeckt gebliebene Software-Schwachstellen zu finden. Die Firma macht Vollversionen nur ausgewählten Behörden und Unternehmen zugänglich, damit sie ihre Computersysteme absichern können.
Die Debatte um KI war in den vergangenen Tagen noch von einem Anthropic-Forscher angeheizt worden, der mit einer drastischen Warnung zurücktrat. Die großen Entwickler Künstlicher Intelligenz handelten unverantwortlich „und spielen mit unseren Leben“, erklärte Jacob Coxon. Anthropic-Forscher Evan Hubinger bestätigte wenig später Coxons Sorgen.
Er persönlich denke, die Gefahr, dass KI die Menschheit töte, liege im kommenden Jahrzehnt bei mehr als zehn Prozent, schrieb er auf X. In den USA gibt es zudem eine wachsende Bewegung gegen riesige Rechenzentren, auf deren Bau KI-Firmen wie OpenAI angewiesen sind.
Quelle: haz/ack (dpa, rtr, afp)
| # | Наименование новости | Тональность | Информативность | Дата публикации |
|---|---|---|---|---|
| 1 | Глава Anthropic Амодеи призвал компании замедлить темпы развития ИИ | 0 | 9.77 | 12-09-2026 |
| 2 | Forscher bei Anthropic schlagen Alarm wegen KI-Beschleunigung | 0 | 13.77 | 11-09-2026 |
| 3 | KI-Angst wächst: OpenAI-Chef sagt Börsengang für 2026 ab | 0 | 21.49 | 13-09-2026 |
| 4 | СМИ сообщили о вызове глав OpenAI и Anthropic в сенат Австралии из-за ИИ-агентов | 0 | 16.3 | 26-09-2026 |
| 5 | Создателей ChatGPT и Anthropic потребовали в сенат Австралии | 0 | 5.78 | 26-09-2026 |
| 6 | Přidal se i Bill Gates. AI by mohla způsobit smrt miliardy lidí, tvrdí zakladatel Microsoftu | 0 | 6.84 | 26-09-2026 |
| 7 | Sick fetishist past of AI doom-monger lauded by Bernie Sanders: Depraved list of sadistic demands, 'sex slave' and perverse link to OnlyFans model | 0 | 10.69 | 25-09-2026 |
| 8 | Sam Altman sagt Börsengang ab: Was weiß der OpenAI-Chef mehr als wir wissen? | 0 | 12.21 | 16-09-2026 |
| 9 | KI-Boom: Milliardenkredite bedrohen die Finanzmärkte | 0 | 12.07 | 21-09-2026 |
| 10 | Ex-Kommunikationschef: „Wir müssen Trump loswerden“ | 0 | 11.04 | 24-09-2026 |