AI چیٹ بوٹس سوالات کے جواب دے سکتے ہیں، مختلف ٹولز (tools) کو استعمال کر سکتے ہیں، اور سیکیورٹی کمزور ہونے کی صورت میں ایسی معلومات ظاہر کر سکتے ہیں جو انہیں نہیں کرنی چاہئیں۔ یہ کورس بتاتا ہے کہ چیٹ بوٹ کیسے کام کرتا ہے، اس کے اعتماد کی حدود (trust boundaries) کیا ہیں، اور کس طرح عام حملے ایک عام بات چیت کو ڈیٹا کی چوری، نقصان دہ نتائج، ٹولز کے غلط استعمال یا اخراجات میں بے تحاشا اضافے میں بدل سکتے ہیں۔ یہ کورس ان مبتدیوں کے لیے ہے جو چیٹ بوٹ سے وابستہ خطرات کو اتنی اچھی طرح سمجھنا چاہتے ہیں کہ وہ سیکیورٹی اقدامات کا جائزہ لے سکیں، ڈیزائنز کو پرکھ سکیں اور چیٹ بوٹ کے اجرا (ship) سے قبل اس میں موجود خامیوں کی نشاندہی کر سکیں۔
یہ کورس اس بات کا احاطہ کرتا ہے کہ ایک LLM چیٹ بوٹ 'ریکوئسٹ لوپ' (request loop) میں سسٹم پرامپٹ، چیٹ ہسٹری، صارف کے ان پٹ اور ٹولز کو کس طرح استعمال کرتا ہے، اور ساتھ ہی اس میں رازداری (confidentiality)، سالمیت (integrity) اور دستیابی (availability) پر مبنی بنیادی سیکیورٹی ماڈل کا بھی جائزہ لیا جاتا ہے۔ اس کے بعد، اس میں پرامپٹ انجیکشن، جیل بریکنگ، پرامپٹ لیکج، پرائیویسی کے خطرات، ٹولز کا غلط استعمال، ڈینائل آف سروس (DoS)، گارڈ ریلز، ڈیٹا کے تحفظ، اجازت (authorization)، ریٹ لمٹس، نگرانی اور 'ریڈ ٹیمنگ' (red teaming) جیسے موضوعات شامل ہیں۔