The National Times - Britisches Sicherheitsinstitut: KI-Modell verschickt Phishing-Mail

Britisches Sicherheitsinstitut: KI-Modell verschickt Phishing-Mail


Britisches Sicherheitsinstitut: KI-Modell verschickt Phishing-Mail
Britisches Sicherheitsinstitut: KI-Modell verschickt Phishing-Mail / Foto: © AFP

Ein erneuter Vorfall mit einem KI-Modell des US-Unternehmens Anthropic hat die Risiken von eigenständig handelnder Künstlicher Intelligenz offengelegt. In einem Test legte sich das KI-Modell Mythos 5 eine falsche Identität zu, um Entwickler anzuschreiben und sie davon zu überzeugen, Schadprogramme in ihre Software einzubauen. Es handle sich um "eine Täuschung von beispielloser Schwere", erklärte das britische Institut für KI-Sicherheit (AISI) am Dienstag.

Textgröße ändern:

Forscher des AISI gewährten KI-Modellen von Anthropic und des ChatGPT-Entwicklers OpenAI absichtlich Zugang zum Internet. Sie seien davon ausgegangen, dass die Künstliche Intelligenz (KI) sich dort nur Werkzeuge holen würde, um die gestellte Aufgabe zu erfüllen, erklärte das AISI. Doch vor allem ein Modell - Mythos 5 - habe sich "eigenmächtig und ohne Genehmigung" gegen "echte Menschen und Organisationen" gerichtet.

Mythos 5 versuchte demnach, Schadprogramme in ein Projekt einzuschleusen, dessen Software frei zugänglich ist. Das Modell erstellte dafür eine gefälschte Identität auf der für jedermann zugänglichen Entwickler-Plattform GitHub. Unter dieser Identität verschickte es sogenannte Phishing-Mails - also echt aussehende Mails, mit denen Kriminelle versuchen, etwa an Daten zu kommen. "Ein menschlicher Projektbetreuer durchschaute den Versuch und weigerte sich, den Schadcode freizugeben", erklärte AISI.

Der Vorfall wurde erst nachträglich bei der Auswertung des Versuchs entdeckt, wie das Institut mitteilte. Ungefähr eine Stunde nach dieser Entdeckung sei der Versuch abgebrochen worden. Ein Schaden in der echten Welt sei nicht entstanden, versicherte AISI. Die Risiken der KI-Modelle seien aber "klar" zutage getreten. Gleichzeitig mahnte das Institut, den Vorfall mit "Vorsicht" zu bewerten - die Testbedingungen hätten ihn erst ermöglicht.

AISI untersucht nach eigenen Angaben die neuesten KI-Modelle, um potenzielle Risiken zu erkennen - bevor diese Modelle der Öffentlichkeit zugänglich gemacht werden. OpenAI und Anthropic haben mit den Modellen Sol beziehungsweise Mythos in diesem Jahr ihre bislang leistungsfähigsten KI-Modelle veröffentlicht. In den vergangenen Tagen hatten beide Unternehmen bekannt gemacht, dass ihre KI-Modelle in Tests mehrfach eigenmächtig in Computersysteme in der echten Welt eingedrungen waren.

Ein Sprecher des Bundesdigitalministeriums sprach von einem "Paradigmenwechsel": Die Fähigkeiten von KI-Modellen nähmen rasend schnell zu, das verändere auch die "Bedrohungslage massiv". Mehrere EU-Politiker forderten eine größere technologische Eigenständigkeit Europas von US-Konzernen. Ein unkontrolliertes Vorgehen von KI dürfe nicht Realität werden.

R.Hawkins--TNT

Empfohlen

Künstliche Intelligenz: Trump setzt auf Selbstregulierung der Tech-Branche

Ungeachtet von Sicherheitswarnungen aus der Tech-Branche lehnt US-Präsident Donald Trump gesetzliche Vorschriften für Künstliche Intelligenz weiter ab. Stattdessen sollten sich die KI-Unternehmen freiwillig selbst regulieren, sagte Trump am Dienstag bei einem Treffen mit den Chefs der großen Tech-Konzerne. Im Anschluss wollte er ein Dekret zur Umbenennung von KI in "Superintelligenz" unterzeichnen.

OpenAI veröffentlicht neues KI-Modell - Nach Aus für ein anderes

Der ChatGPT-Entwickler OpenAI hat ein neues Modell für Künstliche Intelligenz (KI) veröffentlicht - kurz nachdem er ein anderes wegen Sicherheitsbedenken verworfen hatte. Das am Dienstag vorgestellte Modell GPT-6.1 Sol sei weniger leistungsstark als das Flaggschiff GPT-6 Astra, erklärte das Unternehmen. Dafür sei es deutlich billiger. GPT-6.1 Sol ist Abonnenten vorbehalten.

Gespräche über KI-Regeln: US-Tech-Chefs zu Treffen im Weißen Haus erwartet

Die Chefs der großen US-Tech-Konzerne sind am Dienstag zu Gesprächen über KI ins Weiße Haus geladen. Der Vorsitzende des Repräsentantenhauses, Mike Johnson, kündigte an, dass es um die mögliche Regulierung der Technologie gehen werde. US-Präsident Donald Trump lehnt dies bislang allerdings kategorisch ab. Mehrere Vorfälle hatten die Diskussion um die Sicherheit von KI zuletzt angefacht. Der KI-Entwickler OpenAI teilte mit, sein neues KI-Modell wegen Sicherheitsbedenken noch nicht zu veröffentlichen.

Trump empfängt Chefs von Tech-Konzernen zu Gesprächen über KI im Weißen Haus

US-Präsident Donald Trump und der Sprecher des Repräsentantenhauses, Mike Johnson, empfangen am Dienstag die Chefs der großen US-Tech-Konzerne für Gespräche über die mögliche Regulierung von Künstlicher Intelligenz im Weißen Haus. CNN berichtete, dass Mark Zuckerberg von Meta, Sundar Pichai von Google und OpenAI-Vize Greg Brockman geladen seien, nach AFP-Informationen werden auch Dario Amodei von Anthropic und Jensen Huang von Nvidia erwartet. Elon Musk hält sich am Dienstag ebenfalls in Washington auf.

Textgröße ändern: