Beim Jailbreaking wird untersucht, ob eine LLM-Anwendung dazu gebracht werden kann, ihre vorgesehenen Sicherheitsgrenzen zu überschreiten, was Risiken für Nutzer, Organisationen und öffentlich zugängliche Systeme birgt. Dieser Kurs vermittelt Entwicklern mit Vorkenntnissen, ML-Ingenieuren und Sicherheitsexperten einen klaren Rahmen, um Jailbreak-Mechanismen zu analysieren, deren Grenzen zu erkennen und mehrschichtige Verteidigungsmaßnahmen anzuwenden. Sie erlernen praktische Methoden zur Erkennung, zur verantwortungsvollen Evaluierung und zur Härtung von Chatbots, ohne dabei Anleitungen zu veröffentlichen, die für Angriffe ausgenutzt werden könnten.
Der Kurs behandelt die Grenzen des Sicherheitstrainings, Persona- und Multi-Turn-Angriffe, Many-Shot-Kontexte, Adversarial Suffixes, Verschleierungstechniken sowie multimodale Eingaben. Zudem werden Erkennungsmethoden, mehrschichtige Verteidigungsstrategien, eine verantwortungsvolle Bewertung der Widerstandsfähigkeit sowie die operative Härtung öffentlicher Chatbots thematisiert.