Schița de curs
Introducere în Modelarea Amenințărilor pentru AI
- Ce face sistemele de AI vulnerabile?
- Suprafața de atac AI vs sisteme tradiționale
- Vectori cheie de atac: straturi de date, model, ieșire și interfață
Atacuri Adverse asupra Modelelor de AI
- Înțelegerea exemplelor adverse și a tehnicilor de perturbare
- Atacuri white-box vs black-box
- Metode FGSM, PGD și DeepFool
- Vizualizarea și crearea de probe adverse
Inversare a Modelului și Scurgeri de Confidențialitate
- Deducerea datelor de antrenament din ieșirea modelului
- Atacuri de inferență a apartenenței
- Riscuri de confidențialitate în modelele de clasificare și generative
Otrăvirea Datelor și Injecții de Backdoor
- Cum influențează datele otrăvite comportamentul modelului
- Backdoor-uri bazate pe declanșatori și atacuri Trojan
- Strategii de detectare și dezinfectare
Tehnici de Robustete și Apărare
- Antrenament advers și augmentare a datelor
- Maskarea gradientului și preprocesarea intrărilor
- Netezirea modelului și tehnici de regularizare
Apărări AI de Protecție a Confidențialității
- Introducere în confidențialitatea diferențială
- Injecție de zgomot și bugete de confidențialitate
- Învățare federată și agregare securizată
Securitatea AI în Practică
- Evaluarea și implementarea modelelor conștiente de amenințări
- Utilizarea ART (Adversarial Robustness Toolbox) în setări aplicate
- Studii de caz din industrie: breșe reale și măsuri de atenuare
Rezumat și Pași Următori
Cerințe
- Înțelegerea fluxurilor de lucru în învățarea automată și antrenarea modelelor
- Experiență cu Python și framework-uri comune de ML precum PyTorch sau TensorFlow
- Familiaritate cu concepte de bază din securitate sau modelarea amenințărilor este utilă
Audiență
- Ingineri de învățare automată
- Analiști de securitate cibernetică
- Cercetători AI și echipe de validare a modelelor
Mărturii (2)
Mi-a plăcut foarte mult să învăț despre atacurile de IA și despre instrumentele disponibile pentru a începe să exersez și să le folosesc în mod activ pentru testarea securității. Am acumulat o mulțime de cunoștințe pe care nu le aveam la început, iar cursul a îndeplinit ceea ce speram. Partea mea preferată din training a fost Comet Browser și am fost uimit de ceea ce poate face. Cu siguranță este ceva ce voi explora mai mult. În general, a fost un curs excelent și m-am bucurat să învăț totul despre OWASP GenAI Top 10.
Patrick Collins - Optum
Curs - OWASP GenAI Security
Tradus de catre o masina
Cunoașterea profesională și modul în care ne-a prezentat-o
Miroslav Nachev - PUBLIC COURSE
Curs - Cybersecurity in AI Systems
Tradus de catre o masina