Assemblée générale 2017 du programme de recherche BVH - 30 novembre 2017, CESR, Tours - Projet mené en partenariat entre le Laboratoire d'informatique de Tours (Jean-Yves Ramel, équipe RFAI, et le CESR équipe BVH)

1. Projet
« Collation numérique »
RTR Images
LI-RFAI / CESR-BVH
http://www.bvh.univ-tours.fr
Assemblée Générale BVH, CESR
Tours, 30/11/2017
Jean-Yves Ramel
(Pr, Laboratoire d’Informatique de Tours)

2. Présentation de la problématique
• Objectifs : Construire une Machine à collationner
« Identification, alignement et comparaison automatique des
pages de différents exemplaires de livres anciens numérisés »
• Cahier des charges
– Rapprochement et alignement d’images de pages issues d’exemplaires
différents d’un meme ouvrage afin de pouvoir ensuite comparer plus
finement leur contenu
– Suppression du bruit et recalage
des images par application de
transformations géométriques
– Comparaison page à page et
signalement des variantes les
plus importantes au travers
d’IHMs conviviales
2

3. Existant ‐ Etat de l’art
• Comparaison d’images de documents
– Beaucoup de travaux en OCR et classification de documents
– Niveau structure / lexical / caractéristiques globales (layout)
– Peu en comparaison / alignement de documents (niveau pixel)
• Recalage d’images
– Beaucoup de travaux en analyse d’images médicales
– Comparaison d’images naturelles : Points d’interêt SURF/SIFT + RANSAC
3

4. Proposition de chaine de traitement
4
Analyse fine
des différences
Préparation des
images
Création des couples
d’images
Recalage des couples
d’images

5. • Création de couples de pages
potentiels entre ouvrages
– Mesure de similarité entre images
avec la méthode imregDFT (v2.0 python)
– Comparaison des spectres de Fourier
– Utilisation de OSB / DTW pour reduire
le nombre de tests
Proposition de chaine de traitement
5
http://imreg‐dft.readthedocs.io/. An FFT‐
based technique for translation, rotation and
scale‐invariant image registration. BS Reddy,
BN Chatterji. IEEE Trans on IP, 1996

6. Proposition de chaine de traitement
• Recalage des couples d'images
– Détection de points d’intérêt
– SURF: Speeded Up Robust Features
– RANSAC = Random Sample Consensus
– Texte et graphique
– Robustesse aux différences d’intensité
6

7. Proposition de chaine de traitement
• Analyse des différences fines
– Différences par région visualisées sur image binaire
7

8. Proposition de chaine de traitement
• Analyse des différences fines
– Différences par région visualisées sur image binaire
8

9. Proposition de chaine de traitement
• Analyse des différences fines
– Différences par région visualisées sur image binaire
9

10. 10
Bilan et perspectives
• Conclusion
• Un problème original peu étudié
• Création d’un 1er prototype : OSB/DTW ‐ SURF + RANSAC – Approche Région
• Participative design : Fonctionnalités et interfaces
• Création d’une base d’images de test
• Perspectives
• Poursuite des développements
• Poursuite des expérimentations