Skip to content

Latest commit

 

History

History
239 lines (208 loc) · 7.26 KB

2021.09.20_workshop-s02e04_notes.md

File metadata and controls

239 lines (208 loc) · 7.26 KB

Atelier DSRC s02e04 du 20 septembre 2021

Liens utiles

Participants

  • Scaphy Data
  • Heytem Boumaza
  • Clément Mayer
  • Marlène D.
  • Eric Boniface
  • Cloélia Tissier
  • Céline Jacques
  • Amine Saboni
  • Alexis Leautier
  • Possibile Parigi
  • Benjamin Cohen-Lhyver
  • Maxime
  • Virgile Fouquet
  • Cédric Brice
  • Cédric Meurée
  • Guillaume Avrin Lne
  • Katleen Blanchet
  • Tiba Delespierre
  • José Luis Sànchez Rojas
  • Nicolas Landel
  • Farid Ahamada
  • Emilie Sirvent-Hien
  • Lore LePabic
  • Thomas Cayla
  • Eric chau
  • Brik Reda
  • Arthur Lezer

Sommaire

  1. Nouveautés sur l’outil d’assessment
  2. Label Intelligence Artificielle Responsable et de Confiance
  3. Atelier participation : évolutions du référentiel d’évaluation (2è semestre 2021)

Compte-rendu

Nouveautés sur l’outil d’assessment

Nouvelle fonctionnalité en production :

  1. Possibilité, pour chaque élément de réponse, d’ajouter une justification pour expliquer le(s) item(s) de réponse sélectionné(s).

Nouvelles fonctionnalités en cours de développement :

  1. Amélioration du versioning

Afin de pouvoir mieux identifier les éléments nouveaux ou qui ont été modifiés à la suite de la mise à jour du référentiel d’évaluation (chaque semestre), le versionning a été amélioré. À chaque release semestrielle du référentiel cadre, pour chaque élément d'évaluation, une pastille "nouveau" / "mis à jour" / "inchangé" indique l'impact de la mise à jour sur l'élément. Lorsque celui-ci est nouveau ou mis à jour, un message explique de quoi il retourne. Cela permet d'éditorialiser en quelque sorte les nouveautés de l'assessment, afin que l'utilisateur s'y retrouve mieux. Une nouvelle page dédiée recense l’ensemble des changements par nouvelle version du référentiel

  1. Demande de labellisation en ligne

Les demandes de labellisations sont accessibles depuis un onglet “Labellisation” dans “Mon tableau de bord” pour les évaluations ayant atteinte le score seuil d'éligibilité. Une partie du workflow est gérée directement depuis la plateforme. Les échanges d’informations ont lieu en dehors de la plateforme à ce stade.

Label Intelligence Artificielle Responsable et de Confiance

Présentation du label Intelligence Artificielle Responsable et de Confiance par Labelia Labs (ex- Substra Foundation) : voir document de présentation.

Questions reçues pendant la présentation :

  • Quelle temporalité estimée pour ce label ? --> Octobre 2021
  • Est-ce que vous avez vu une demande de la part des entreprises/des utilisateurs ? --> la naissance du label provient en effet d'une demande de la part d'utilisateurs ayant réalisé l'auto-évaluation et voulant communiquer autour de leur score.
  • Ce label aura-t-il une visée internationale ? --> Complexe en raison de la diversité des contextes et des réglementations. Cependant le référentiel d'évaluation est disponnible en anglais.
  • Combien de temps environ pour être labelisé ? --> Après avoir réalisé l'auto-évaluation, cela peut être dans l'ordre du mois, mais cela dépendra également de la réactivité des entreprises.
  • Présentation par Guillaume Avrin de la certification proposée par le LNE

Atelier participation : évolutions du référentiel d’évaluation (2è semestre 2021)

  1. Proposition de modifications des sections

Un premier ensemble de sections dédiées aux activités des data scientists :

  • Préparation et protection des données
  • Modélisation, formation, évaluation
  • Déploiement, suivi/MLOps

Une deuxième série de sections consacrée aux aspects organisationnels, aux processus et aux externalités, plus globale pour l'organisation qui effectue l'évaluation :

  • Organisation, gouvernance, responsabilités - internes à l'organisation
  • Organisation, gouvernance, responsabilités - liées aux parties externes
  • Externalités négatives

Retour des participants :

  • Choix business / variable qu'on veut maximiser ? Plutôt côté organisation / processus ? Objectif de ce que veut maximiser l'algorithme peut avoir un fort impact et mériterait dans la première partie
  • Nouvelles sections sont plus claires au global.
  1. Data Préparation
  • Point à traiter : au sujet de ces éléments de data préparaton : quel public accède aux informations collectées par les différents points ? (Concepteurs, utilisateurs, autres ?)

Copie du chat

16:46 Bonjour à tous, nous démarrons l'atelier d'ici 15 20 minutes :)

Scaphy Data 16:46 Ok

Heytem Boumaza 16:51 Bonjour!

Vous 16:53 Bonjour à tous, on démarre vers 17h05 :)

Vous 17:10 https://github.com/SubstraFoundation/referentiel-evaluation-dsrc/blob/master/referentiel_evaluation.md

Vous 17:14 https://assessment.labelia.org/fr/

Cloélia Tissier 17:39 Bonjour, quelle temporalité estimée pour ce label ?

virgile fouquet 17:39 Plutôt intéressant :)

Marlène D. 17:39 Plutôt intéressant

Katleen Blanchet 17:41 Très intéressant !

Alexis Leautier 17:41

Très intéressant ! :) Une question : est-ce que vous avez vu une demande de la part des entreprises/des utilisateurs ?

(je débarque un peu pardon :) )

Cloélia Tissier 17:42 Ce label aura-t-il une visée internationale ?

Alexis Leautier 17:43 merci !

virgile fouquet 17:43 j'ai peut etre râté une étape, mais combien de temps environ pour être labelisé ?

virgile fouquet 17:45 uff merci

virgile fouquet 17:46 à l'échelle d'un grand groupe c'est même très rapide

Cloélia Tissier 17:46 si le grand groupe est réactif ;)

Guillaume Avrin Lne 17:50 Merci Eric !

Vous 18:00 https://docs.google.com/presentation/d/1MIa4NCodLFZRD_m-FYg_uhNJ__GiK9kD2vm-jNMOHCs/edit?usp=sharing

virgile fouquet 18:04 je dois vous laisser. Merci

Eric Boniface 18:04 Merci Virgile à bientôt

Cedric Meurée 18:05 besoin d'un peu de recul peut-être, mais ça fait du sens en lien avec certaines des discussions qu'il a pu y avoir

Amine Saboni 18:13 Au sujet de ces éléments de data prep : quel public accède aux informations collectées par les différents points ? (Concepteurs, utilisateurs, autres ?)

Vous 18:27 https://www.labelia.org/fr/replay-atelier-21062021

Arthur Lezer 18:28 un replay du meetup d'ajd sera-t-il dispo ? (raté le début)

pas de souci je récupèrerai avec la pres

Arthur Lezer 18:29 merci pour le récap!

Marlène D. 18:30 C'était très intéressant, merci beaucoup !

Scaphy Data 18:30 Merci

Katleen Blanchet 18:31 Merci !

Cedric Meurée 18:31 merci beaucoup à vous pour ce meetup !

Cloélia Tissier 18:31 Merci beaucoup et belle soirée !

Arthur Lezer 18:32 Merci salut!