Plan du cours
Introduction au Red Teaming IA
- Compréhension du paysage des menaces IA
- Rôles des équipes rouges dans la sécurité IA
- Considérations éthiques et légales
Apprentissage machine adversarial
- Types d'attaques : évasion, empoisonnement, extraction, inférence
- Génération d'exemples adversariaux (par ex. FGSM, PGD)
- Attaques ciblées vs non ciblées et indicateurs de succès
Test de la robustesse des modèles
- Évaluation de la robustesse sous perturbation
- Exploration des angles morts et des modes d'échec des modèles
- Tests de stress des modèles de classification, de vision et de NLP
Red Teaming des pipelines IA
- Surface d'attaque des pipelines IA : données, modèle, déploiement
- Exploitation des APIs et des points de terminaison de modèles non sécurisés
- Ingénierie inverse du comportement et des sorties des modèles
Simulation et outillage
- Utilisation de l'Adversarial Robustness Toolbox (ART)
- Red teaming avec des outils comme TextAttack et IBM ART
- Outils de sandboxing, de surveillance et d'observabilité
Stratégie de Red Team IA et collaboration pour la défense
- Développement d'exercices et d'objectifs de red teaming
- Communication des résultats aux équipes bleues
- Intégration du red teaming dans la gestion des risques IA
Résumé et prochaines étapes
Pré requis
- Une compréhension des architectures d'apprentissage automatique et d'apprentissage profond
- De l'expérience avec Python et des frameworks de ML (par ex. TensorFlow, PyTorch)
- Une familiarité avec les concepts de cybersécurité ou les techniques de sécurité offensive
Audience
- Chercheurs en sécurité
- Équipes de sécurité offensive
- Professionnels de l'assurance IA et du red teaming
Nos clients témoignent (2)
J'ai vraiment apprécié d'apprendre sur les attaques par IA et les outils disponibles pour commencer à pratiquer et à utiliser activement pour les tests de sécurité. J'ai acquis beaucoup de connaissances que je n'avais pas au début, et le cours a répondu à mes attentes. Ma partie préférée de la formation était le navigateur Comet, et j'ai été impressionné par ce qu'il pouvait faire. C'est assurément quelque chose que je vais explorer davantage. Globalement, c'était un excellent cours et j'ai beaucoup apprécié d'apprendre le Top 10 OWASP GenAI.
Patrick Collins - Optum
Formation - OWASP GenAI Security
Traduction automatique
Les connaissances professionnelles et la manière dont il les a présentées devant nous
Miroslav Nachev - PUBLIC COURSE
Formation - Cybersecurity in AI Systems
Traduction automatique