Kurz zusammengefasst

  • Das Sicherheitsunternehmen PromptArmor sagt, dass der KI-Assistent Rovo durch versteckte Anweisungen in einer hochgeladenen Datei wie PDFs dazu gebracht werden kann, Daten ohne menschliche Genehmigung zu exfiltrieren.
  • Der Trick funktioniert auch, wenn eine Organisation die Websuche von Rovo deaktiviert, da das URL-Öffnungs-Tool aktiv bleibt.
  • Atlassian, der Hersteller von Rovo, erhielt den Bericht am 23. Mai und schwieg; zwei Monate später ist Rovo laut dem Sicherheitsunternehmen weiterhin verwundbar.

Erinnern Sie sich an die Zeiten, als Black-Hat-SEOs Webseiten mit weißen Schlüsselwörtern auf weißem Grund vollstopften – für Leser unsichtbar, für Google lesbar – um die Suchrankings zu manipulieren? Hacker machen jetzt dasselbe mit KI-Modellen. Der Angreifer versteckt Anweisungen in einem PDF-Dokument, das Modell kann nicht zwischen den Worten des Benutzers und den eingepflanzten unterscheiden, und es gehorcht.

Laut PromptArmors Offenlegung kann Rovo – Atlassians Agent, der sich über Jira, Confluence und den Rest Ihres Arbeitsbereichs erstreckt – mit einer einzigen vergifteten Datei in eine Datenpipeline verwandelt werden. Ein Opfer bittet Rovo, einige Tickets zu organisieren, lädt ein Dokument hoch, und das Dokument trägt einen versteckten Prompt (zum Beispiel eine Anweisung, die in transparenter Farbe und mit einer Schriftgröße von 1 Pixel geschrieben ist).

Das Auge kann es nicht sehen, aber ein Agent erkennt diesen Text als einen weiteren Text im Dokument. Dieser Prompt weist Rovo an, sensible Daten zu sammeln und auf eine vom Angreifer kontrollierte URL zu übertragen. Das Unternehmen nennt dies einen Zero-Click-Angriff. Es gibt keinen Genehmigungsklick und keine Warnung.