Pourquoi et com­ment implé­mente-t-on VITAM en tant que SAE : le retour d’expé­rience du CINES

1. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
Pourquoietcommentimplémente-onVITAM:
leretourd'expérienceduCINES
Lorène Béchard – CINES

2. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
INES
DATA ServicesDiffusion Analyse Traitement Archivage

3. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services
Stockage
Objets
Réplications
Entrepôts
de données
Portails de
diffusion
Open Science
Archivage
pérenne
Certifications
Traitements
Calculs
IA
Echantillons
pour les
communautés
de recherche
Plan de gestion
des données
La data : Point central de l’offre de services du CINES

4. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services Le service d’archivage
Archivage à moyen et long termes des données scientifiques, patrimoniales et
administratives de l’enseignement supérieur et de la recherche

5. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services Point de départ des réflexions
 Veille régulière sur les SAE existants
 SAE actuel « vieillissant » (2008)

6. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services Pourquoi VITAM ?
Fin 2015 : Signature
convention de partenariat
Fin 2017-2018 :
Implication dans les
groupes de travail
Mi 2018 - Début 2019 :
Evaluation fonctionnelle et
technique de la V2 de
VITAM

7. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services
Evaluation fonctionnelle et technique de VITAM

8. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services Les objectifs et résultats de l’étude
 Identifier les besoins (notamment techniques)
 Remonter les besoins non couverts à VITAM
 Identifier le travail à faire
 Vérifier la couverture fonctionnelle et la conformité
 Identifier les risques
 Choisir la stratégie à appliquer

9. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services Les effets bénéfiques de l’étude
 Forte montée en compétence VITAM en interne
 Cohésion de l’équipe projet inter-département
 Adoption des méthode et outils Agile (Kanban - Scrum)
 Incubateur pour le futur SAE VITAM-CINES
 Comparaison et mise en perspective des pratiques en AE
avec les autres acteurs nationaux

10. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services
Mutualisation
Open source
Scalabilité
Interopérabilité

11. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services Où aller après ?

12. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services
Infrastructure
Développement
Fonctionnel
Définir le « Reste à faire » !
 Acheter le matériel
 Installer la version XL de VITAM
 …

13. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
Zone-admin-1
Zone-data-1
Zone-storage-2Zone-storage-1
Zone-applicative-2 Zone-applicative-3
Zone-applicative-4Zone-access
Zone-external
Vit-acc-1-1/2 Vit-app-2-1/2/3 Vit-app-3-1/2/3 Vit-app-4-1 Vit-adm-1-1/2
Vit-dat-1-1(à6)
Vit-sto-2-1/2/3Vit-sto-1-1/2
Vit-ext-1-1
Zone-applicative-1
Vit-app-1-1/2
Zone-data-2
Vit-dat-2-1/2/3
Zone-data-3
Vit-dat-3-1(à6)
Zone-admin-2
Vit-adm-2-1/2/3
VMs : 71 CPU : 264 RAM : 500 Go
Access-external
Ingest-internal
Access-internal
ingest-external
Fonctional-
administration
logbook
Security-internal
metadata
worspace Storage-engineprocessing worker
Storage-offer-
default
Mongod-dataMongoc-data
Mongos-data
Elasticsearch-
data
cerebro
IHM-DEMO
Elasticsearch-log
Consul-server
logstash
Kibana-log
Mongoc-offer
Mongos-offer
Kibana-data
Zone-applicative-5
Vit-app-5-1(à10)
Zone-applicative-6
Vit-app-6-1
Zone-applicative-7
Vit-app-7-1(à4)
Zone-storage-3
Vit-sto-3-1/2/3
Mongod-offer
Zone-storage-5Zone-storage-4
Vit-sto-5-1/2/3Vit-sto-4-1/2
Storage-offer-
default
Mongoc-offer
Mongos-offer
Zone-storage-6
Vit-sto-6-1/2/3
Mongod-offer
IHM-ADMIN
Zone-storage-8Zone-storage-7
Vit-sto-8-1/2/3Vit-sto-7-1/2
Storage-offer-
default
Mongoc-offer
Mongos-offer
Zone-storage-9
Vit-sto-9-1/2/3
Mongod-offer
Tapes - LTO
Tapes - Jaguar
File system

14. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
FS
Tape lto
Zone Access
(vit-acc)
Zone IHM
(vit-ext)
Zone Admin (vit-adm)
Zone Applicative (vit-app)
Zone Data (vit-dat)
Zone Storage (vit-sto) Données stockées
Extérieur
https 8443
https 8444
http 8100
http 8101
http 8004
http 8005
https 9900
tcp 9300
tcp 27017
Syslog/tcp 10514
tcp 8300
tcp 8301
tcp 8302
http 9201
tcp 8301
ssh 22
http 9200
http 5601
http 8500
http 9000
http 9201
ssh 22 Dns/udp 53
Zone exploitation
https 8443
https 8444
ES-log + consul
Logstash+cerebro+kibana
ES-data
MD
MC+MS
MC+MS Offer FS
MD
worker
Logbook + SI FA + metadata
Storage-engineworkspace
processing
A + I (int)
A + I (ext)
Dns/udp 53Zone PACv3
https 8443
ZONES & FLUX
VITAM
X-LARGE
1
2
3
4
1 2 3 4 1 2 3 4
5
9000
10514
5601
9201
8500
8444
8443
https 8446
8446 8101
8100
8203 8201
9102
8004
8200
9002
8005
9104
9200
27017
9300
27018
27019
9900
vit-app-1
vit-app-2 vit-app-3
vit-app-4
vit-app-6
vit-app-5
vit-app-7
vit-dat-1
vit-dat-3
vit-dat-2
vit-adm-1
vit-adm-2
vit-acc-1
vit-ext-1
vit-sto-1vit-sto-2
vit-sto-3
vit-sto-4vit-sto-5
vit-sto-6
pac-ordo-1
(connecteur)
4
vit-sto-9
Tape Jagvit-sto-8 vit-sto-7

15. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services
Infrastructure
Développement
Fonctionnel
Définir le « Reste à faire » !
 Acheter le matériel
 Installer la version XL de VITAM
 …
 IHM d’administration fonctionnelle et technique
 Outil de génération de profils d’archivage SEDA 2.1
 Connecteurs de conversion des 1M d’archives
 Plugins spécifiques CINES (validateur de formats, etc.)
 (IHM utilisateurs)
 …

16. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services
IRODS
IPUT
INITIALIZE
PRESERVATION
ARCHIVE
METADATA-INDEXING
ARCSYS
ARCHIVAGE
ARCSYS
ACCES
IHM – HTTPS
API Ingest
INGEST
DATA MANAGEMENT
OFFRE STOCKAGE
PRESERVATION
ACCESS
SFTP
Générateur SEDA 2.1
& connecteur VITAM
FS
FSWorker - Plugins
PLUGGABLES
PacV3
SIP DUBLIN CORE CINES – SEDA 1.0 SEDA 2.1
Bandes
Bandes
VITAM
PLUGGABLES
Traitements selon
classe service
Intégration plugins
CINES dans VITAM
Validateur Formats
(FACILE)
Traitement OCR et
indexation
THUMBNAILS …
… …

17. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services
Infrastructure
Développement
Fonctionnel
Définir le « Reste à faire » !
 Acheter le matériel
 Installer la version XL de VITAM
 …
 IHM d’administration fonctionnelle et technique
 Outil de génération de profils d’archivage SEDA 2.1
 Connecteurs de conversion des 1M d’archives
 Plugins spécifiques CINES (validateur de formats, etc.)
 (IHM utilisateurs)
 …
 Choisir et spécifier !
 Et faire des mapping (de bordereaux, de profils, …)
 …

18. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services
Infrastructure
Développement
Fonctionnel
Définir le « Reste à faire » !
 Acheter le matériel
 Installer la version XXL de VITAM
 …
 IHM d’administration fonctionnelle et technique
 Outil de génération de profils d’archivage SEDA 2.1
 (IHM utilisateurs)
 Connecteurs de conversion des 1M d’archives
 …
 Choisir et spécifier !
 Et faire des mapping (de bordereaux, de profils, …)
 …

19. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services Mobiliser des ressources
 Equipe de 7 personnes environ : chef de projet,
archivistes, développeurs, architecte SI,
administrateur système
 Transverse dans l’organisation du CINES
 Mais insuffisant…

20. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services Mutualiser

21. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services Mutualisation d’une IHM pour VITAM
 Développement collaboratif et open source
 Encadré et maintenu par la MAC VITAM
 Méthodologie : agilité et UX design
 Contribution CINES :
- génération et gestion des profils
d’archivage (PASTIS)
- gestion des contrats de gestion

22. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services Planifier

23. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services

24. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services Enjeux & Stratégies
Conduite du
changement
Passage en
mode
« souple »
Mise en
œuvre
Mutualisation
Nouveaux
services

25. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services Enjeux & Stratégies
Conduite du
changement
Passage en
mode
« souple »
Mise en
œuvre
Mutualisation
Nouveaux
services

26. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services Enjeux & Stratégies
Conduite du
changement
Passage en
mode
« souple »
Mise en
œuvre
Mutualisation
Nouveaux
services

27. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services Enjeux & Stratégies
Conduite du
changement
Passage en
mode
« souple »
Mise en
œuvre
Mutualisation
Nouveaux
services

28. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services Enjeux & Stratégies
Conduite du
changement
Passage en
mode
« souple »
Mise en
œuvre
Mutualisation
Nouveaux
services

29. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services Enjeux & Stratégies
Conduite du
changement
Passage en
mode
« souple »
Mise en
œuvre
Mutualisation
Nouveaux
services

30. Journée AAF du groupe régional PACA-Corse-Monaco - 10 mars 2020
DATA Services
Merci de votre attention !