Sofortinjektionsrisiko für KI

Zurück zur englischen Version der Dokumentation

Risiken im Zusammenhang mit der Eingabe

Inferenz

Zuverlässigkeit

Neu bei generativer KI

Beschreibung

Ein Eingabeaufforderungs-Injection-Angriff zwingt ein Modell, aufgrund der in Eingabeaufforderungen enthaltenen Struktur oder Informationen eine unerwartete Ausgabe zu erzeugen.

Warum ist die sofortige Injektion ein Problem für Basismodelle?

Injektionsangriffe können verwendet werden, um das Modellverhalten zu ändern und dem Angreifer Vorteile zu verschaffen. Wenn sie nicht ordnungsgemäß kontrolliert werden, könnten Unternehmen Bußgelder, Rufschädigung und andere rechtliche Folgen haben.

Übergeordnetes Thema: AI-Risikoatlas