SlideShare une entreprise Scribd logo
Arnaud de MOISSAC
Co-fondateur et CEO de DCbrain
Membre du GT IA Responsable
Présentation des outils techniques de la boîte à outils
http://www.impact-ai.fr/outils-techniques/
Roxana : v-rorugi@microsoft.com Arnaud: arnaud@dcbrain.com
La boîte à outils pour une IA Responsable
http://www.impact-ai.fr/ia-responsable/
*Contenu très fortement vulgarisé !
Caractériser son DataSet et l'anonymiser
K-anonymisation, GAN …
Statistiques
descriptives
Entrainer des modèles explicables globalement
LIME, SHAP, …
rank_Datascience = 5*rank_Fortnite – 2*rank_scrabble
-3 -2 -1 0 1 2 3 4 5 6
Scrabble
Fortnite
Feature importance : Rank_Datascientist
Scrabble Fortnite
Entrainer des modèles explicables localement
LIME, SHAP, …
Les features importance sont différentes pour chaque cas : on cherche a expliquer chaque décision unitaire du modele
Vérifier que l’erreur est distribuée de façon équitable
nb=339
Predicted Yes Predicted No total
Yes 68 70,1% 29 29,9% 97
No 29 12,0% 213 88,0% 242
nb=161
Predicted Yes Predicted No total
Yes 11 61,1% 7 38,9% 18
No 4 2,8% 139 97,2% 143
Attribution de prêt :
Ici, l’erreur est toujours en défaveur des femmes
Valider que les résultats ne stigmatisent pas certaines catégories
Sélection de candidats par l’IA pour un emploi :
1. Anonymisation : pas d’info de genre
2. Stigmatisation des femmes :
→ la feature "continuité dans l’emploi" est
faussée*
*Est-ce vraiment une bonne idée d’utiliser une feature de continuité dans l’emploi ?
Valider la robustesse des modéles
Robustesse du modèle
Robustesse du déploiement
La boîte à outils pour une IA Responsable
http://www.impact-ai.fr/ia-responsable/

Contenu connexe

Similaire à Responsible AI toolbox - Impact AI

Emploi informatique
Emploi informatiqueEmploi informatique
Emploi informatique
romain0512
 
Présentation sur les carriere
Présentation sur les carrierePrésentation sur les carriere
Présentation sur les carriere
ryangood256
 
Présentation sur les carriere
Présentation sur les carrierePrésentation sur les carriere
Présentation sur les carriere
ryangood256
 
Sebastien_Baldo_a_fr_compact
Sebastien_Baldo_a_fr_compactSebastien_Baldo_a_fr_compact
Sebastien_Baldo_a_fr_compact
Sebastien Baldo
 
Projet carrières
Projet carrièresProjet carrières
Projet carrières
justinegm13
 
Projet carrières
Projet carrièresProjet carrières
Projet carrières
justinegm13
 
Projet carrières
Projet carrièresProjet carrières
Projet carrières
justinegm13
 
Scrum Day 2014 - Êtes-vous prêts pour le modèle Spotify ?
Scrum Day 2014 - Êtes-vous prêts pour le modèle Spotify ?Scrum Day 2014 - Êtes-vous prêts pour le modèle Spotify ?
Scrum Day 2014 - Êtes-vous prêts pour le modèle Spotify ?
Publicis Sapient Engineering
 
Powerpoint carrière
Powerpoint carrièrePowerpoint carrière
Powerpoint carrière
lougau
 

Similaire à Responsible AI toolbox - Impact AI (20)

Talents Nights - Mercredi 27 Juin 2018
Talents Nights - Mercredi 27 Juin 2018 Talents Nights - Mercredi 27 Juin 2018
Talents Nights - Mercredi 27 Juin 2018
 
Quand on change de code, on prévient !(1)
Quand on change de code, on prévient !(1)Quand on change de code, on prévient !(1)
Quand on change de code, on prévient !(1)
 
Adictiz et LudoStat : Performances et best practices de l'advergame
Adictiz  et LudoStat : Performances et best practices de l'advergameAdictiz  et LudoStat : Performances et best practices de l'advergame
Adictiz et LudoStat : Performances et best practices de l'advergame
 
À quoi servent les langages M et DAX
À quoi servent les langages M et DAXÀ quoi servent les langages M et DAX
À quoi servent les langages M et DAX
 
Emploi informatique
Emploi informatiqueEmploi informatique
Emploi informatique
 
IClassRoom
IClassRoomIClassRoom
IClassRoom
 
Présentation sur les carriere
Présentation sur les carrierePrésentation sur les carriere
Présentation sur les carriere
 
Présentation sur les carriere
Présentation sur les carrierePrésentation sur les carriere
Présentation sur les carriere
 
L'agilité en entreprise avec TFS 2013
L'agilité en entreprise avec TFS 2013L'agilité en entreprise avec TFS 2013
L'agilité en entreprise avec TFS 2013
 
Sebastien_Baldo_a_fr_compact
Sebastien_Baldo_a_fr_compactSebastien_Baldo_a_fr_compact
Sebastien_Baldo_a_fr_compact
 
Projet carrières
Projet carrièresProjet carrières
Projet carrières
 
Projet carrières
Projet carrièresProjet carrières
Projet carrières
 
Projet carrières
Projet carrièresProjet carrières
Projet carrières
 
Scrum Day 2014 - Êtes-vous prêts pour le modèle Spotify ?
Scrum Day 2014 - Êtes-vous prêts pour le modèle Spotify ?Scrum Day 2014 - Êtes-vous prêts pour le modèle Spotify ?
Scrum Day 2014 - Êtes-vous prêts pour le modèle Spotify ?
 
Paris Retail Week 10 septembre 2018 - Comment booster les conversions de votr...
Paris Retail Week 10 septembre 2018 - Comment booster les conversions de votr...Paris Retail Week 10 septembre 2018 - Comment booster les conversions de votr...
Paris Retail Week 10 septembre 2018 - Comment booster les conversions de votr...
 
Présentation carrières informatiques
Présentation carrières informatiques Présentation carrières informatiques
Présentation carrières informatiques
 
Powerpoint carrière
Powerpoint carrièrePowerpoint carrière
Powerpoint carrière
 
Cecyf / Coriin - mimikatz et la mémoire de Windows
Cecyf / Coriin - mimikatz et la mémoire de WindowsCecyf / Coriin - mimikatz et la mémoire de Windows
Cecyf / Coriin - mimikatz et la mémoire de Windows
 
Agile Tour 2019 - REX AXA France - Event Storming - 3 amigos
Agile Tour 2019 - REX AXA France - Event Storming - 3 amigosAgile Tour 2019 - REX AXA France - Event Storming - 3 amigos
Agile Tour 2019 - REX AXA France - Event Storming - 3 amigos
 
Projet carrière
Projet carrièreProjet carrière
Projet carrière
 

Responsible AI toolbox - Impact AI

  • 1. Arnaud de MOISSAC Co-fondateur et CEO de DCbrain Membre du GT IA Responsable Présentation des outils techniques de la boîte à outils http://www.impact-ai.fr/outils-techniques/ Roxana : v-rorugi@microsoft.com Arnaud: arnaud@dcbrain.com
  • 2. La boîte à outils pour une IA Responsable http://www.impact-ai.fr/ia-responsable/
  • 4. Caractériser son DataSet et l'anonymiser K-anonymisation, GAN … Statistiques descriptives
  • 5. Entrainer des modèles explicables globalement LIME, SHAP, … rank_Datascience = 5*rank_Fortnite – 2*rank_scrabble -3 -2 -1 0 1 2 3 4 5 6 Scrabble Fortnite Feature importance : Rank_Datascientist Scrabble Fortnite
  • 6. Entrainer des modèles explicables localement LIME, SHAP, … Les features importance sont différentes pour chaque cas : on cherche a expliquer chaque décision unitaire du modele
  • 7. Vérifier que l’erreur est distribuée de façon équitable nb=339 Predicted Yes Predicted No total Yes 68 70,1% 29 29,9% 97 No 29 12,0% 213 88,0% 242 nb=161 Predicted Yes Predicted No total Yes 11 61,1% 7 38,9% 18 No 4 2,8% 139 97,2% 143 Attribution de prêt : Ici, l’erreur est toujours en défaveur des femmes
  • 8. Valider que les résultats ne stigmatisent pas certaines catégories Sélection de candidats par l’IA pour un emploi : 1. Anonymisation : pas d’info de genre 2. Stigmatisation des femmes : → la feature "continuité dans l’emploi" est faussée* *Est-ce vraiment une bonne idée d’utiliser une feature de continuité dans l’emploi ?
  • 9. Valider la robustesse des modéles Robustesse du modèle Robustesse du déploiement
  • 10. La boîte à outils pour une IA Responsable http://www.impact-ai.fr/ia-responsable/