Comment évaluer les activités des bibliothèques à l’ère numérique?

10 990 vues

Publié le

A l'heure où les données sont nombreuses et les visualisation faciles à construire, il devient en effet urgent de faire le point sur ce qu'on mesure et surtout de trouver des repères. Il devient aussi nécessaire de savoir de quoi on parle lorsqu'on parle de l'activité des bibliothèques. Trop souvent on se concentre sur des données d'activité et trop rarement encore sur de véritables indicateurs relatifs à des objectifs.

Voici donc un support qui permet de faire le point sur ces questions, merci aux nombreux contributeurs que je cite.

Publié dans : Formation
0 commentaire
8 j’aime
Statistiques
Remarques
  • Soyez le premier à commenter

Aucun téléchargement
Vues
Nombre de vues
10 990
Sur SlideShare
0
Issues des intégrations
0
Intégrations
5 570
Actions
Partages
0
Téléchargements
55
Commentaires
0
J’aime
8
Intégrations 0
Aucune incorporation

Aucune remarque pour cette diapositive

Comment évaluer les activités des bibliothèques à l’ère numérique?

  1. 1. Comment évaluer les activités des bibliothèques à l’ère numérique? Silvère Mercier, 2015
  2. 2. Le cadre stratégique de l’évaluation Mesurer les performances? Que mesurer? ou les limites de la norme ISO 2789 Quelles métriques de mesure d’ audience? Indicateurs de performances dans la norme ISO 11620 Comment mesurer avec la norme ISO 16439 ?
  3. 3. source : Renaud Aïoutz
  4. 4. Mesurer l’impact des bibliothèques? ISO 16439 Methods and procedures for assessing the impact of libraries Information et documentation — Méthodes et procédures pour évaluer l'impact des bibliothèques (Publiée en 2013 - non traduite)
  5. 5. Que désigne-t-on par impact? Des changements dans les qualifications et les compétences peuvent être identifiés par observation, analyse des logs, ainsi que par des tests. Des preuves sollicitées (entretiens, autoévaluation) peuvent être employées ainsi que d'autres méthodes, mais les résultats auto-administrés seront sans doute à être moins fiables. source : Livre blanc AFNOR sur ISO 16439
  6. 6. Que désigne-t-on par impact? Des changements dans les attitudes et les comportements des usagers peuvent être démontrés dans les résultats des enquêtes et des entretiens, aussi qu’à l’occasion de collectes de témoignages et d’auto-enregistrements. Les statistiques de la bibliothèque ainsi que les résultats d'observations peuvent corroborer les résultats. source : Livre blanc AFNOR sur ISO 16439
  7. 7. Que désigne-t-on par impact? Le succès accru des usagers dans leurs études, leurs recherches, ou le développement de leur vie professionnelle peut être identifié en cherchant les corrélations entre leur utilisation de la bibliothèque et les données de succès dans leur carrière, par exemple résultats aux examens ou avancement de carrière. Les entretiens peuvent apporter des résultats sur l'évaluation que font les personnes interviewées de l'influence de bibliothèque sur leur succès. source : Livre blanc AFNOR sur ISO 16439
  8. 8. Non la mission d’une bibliothèque n’est pas de prêter des objets ou d’être fréquentée!
  9. 9. Et pourtant...
  10. 10. Si les données brutes sont nécessaires #opendata mais ce ne sont que des données...
  11. 11. source : Renaud Aïoutz
  12. 12. Définitions de la norme 11620
  13. 13. Marketing tout court ou marketing public? (Communication et promotion de la Santé - Aspects théoriques, méthodologiques et pratiques. Question Santé, éd. - 1998.)
  14. 14. Le cadre stratégique de l’évaluation Mesurer les performances? Que mesurer? ou les limites de la norme ISO 2789 Quelles métriques de mesure d’ audience? Indicateurs de performances dans la norme ISO 11620 Comment mesurer avec la norme ISO 16439 ?
  15. 15. Les normes AFNOR ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013) ISO 11620:2014 - Information et documentation -- Indicateurs de performance des bibliothèques (Première version 2008 seconde version en 2014) ISO 16439 Methods and procedures for assessing the impact of libraries Information et documentation — Méthodes et procédures pour évaluer l'impact des bibliothèques (Publiée en 2013 - non traduite)
  16. 16. source : http://www. qualitiso. com/etapes- elaboration-norme-
  17. 17. source : http://www. qualitiso. com/etapes- elaboration-norme-
  18. 18. Mesurer la performance des bibliothèques? ISO 11620:2014 - Information et documentation -- Indicateurs de performance des bibliothèques (Première version 2008 seconde version en 2014)
  19. 19. Contribuer à la diffusion des connaissances Budget, personnel, bâtiment, etc. le nombre des emprunteurs et des usagers actifs relativement à la population à desservir L’exemple de la tarification des bibliothèques
  20. 20. Contribuer à la diffusion des connaissances La bibliothèque et ses services le nombre des emprunteurs et des usagers actifs relativement à la population à desservir La bibliothèque est payante pour tous : quelles performances? Pertinence moyenne : les moyens consacrés à la régie sont en contradiction avec l’objectif Efficacité : une barrière tarifaire existe provoquant un résultat moindre par rapport à la gratuité Efficience basse : les investissements publics consentis par la collectivité pour l’objectif principal sont alourdis par la charge de la régie et le temps consacré à faire payer les publics
  21. 21. Contribuer à la diffusion des connaissances Budget, personnel, bâtiment, etc. le nombre des emprunteurs et des usagers actifs relativement à la population à desservir La bibliothèque est gratuite pour tous : quelles performances? Pertinence forte : les moyens investis pour la collectivité sont en cohérence avec l’ objectif Efficacité forte : Aucune barrière tarifaire ne vient gêner l’atteinte de résultats Efficience haute : les investissements publics consentis par la collectivité pour l’objectif principal ne sont pas alourdis par la charge de la régie et du temps qui serait passé à faire payer les gens
  22. 22. Ensemble d’indicateurs = tableau de bord pour orienter l’action et aider à la décision potentiel de développement d’un projet de médiation numérique Dépense de personnel par titre catalogué Pourcentage de son temps que le personnel consacre à la formation
  23. 23. source : http://fr.slideshare.net/alkaselzer/iso-2789-et-iso-11620-des-outils-en-volution-pour-lobservation-et-lvaluation
  24. 24. Evaluer l’activité n’est pas évaluer la satisfaction source : https://assessmentlibrarian.files.wordpress.com/2008/11/plan_evaluation_label_blog1.pdf
  25. 25. Le cadre stratégique de l’évaluation Mesurer les performances? Que mesurer? ou les limites de la norme ISO 2789 Quelles métriques de mesure d’ audience? Indicateurs de performances dans la norme ISO 11620 Comment mesurer avec la norme ISO 16439 ?
  26. 26. ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  27. 27. Qu’est-ce qu’une bibliothèque ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  28. 28. Qu’est-ce qu’un usage d’une bibliothèque? ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  29. 29. Attention les accès ne sont pas des visites du site mais des accès volontaires aux ressources numériques ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  30. 30. Qu’est-ce qu’un emprunteur actif ? ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  31. 31. Un internaute n’est pas un usager actif puisqu’il n’est pas inscrit ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  32. 32. ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013) Les internautes, ces usagers oubliés
  33. 33. La population à desservir ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  34. 34. Les populations cibles ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  35. 35. Les services électroniques ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  36. 36. Le blog ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  37. 37. Les questions de référence = question documentaire pas forcément en ligne ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  38. 38. La formation à distance ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  39. 39. Le wiki ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  40. 40. La visite virtuelle = visiteur unique ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  41. 41. Les visiteurs en ligne sont pourtant comptés ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  42. 42. Compter les usages de collections numérisées ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  43. 43. Compter le nombre de visites virtuelles… du portail uniquement? ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  44. 44. Compter le nombre de services interactifs… sans distinguer dispositifs de flux et fichiers? ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  45. 45. Inadaptation de la norme aux pratiques... ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  46. 46. Attention aux métriques prises en compte ISO 2789 - Information et documentation — Statistiques internationales de bibliothèques (Première version 2006, en cours de traduction en 2013)
  47. 47. Le cadre stratégique de l’évaluation Mesurer les performances? Que mesurer? ou les limites de la norme ISO 2789 Quelles métriques de mesure d’ audience? Indicateurs de performances dans la norme ISO 11620 Comment mesurer avec la norme ISO 16439 ?
  48. 48. Bibliothèques et métriques web
  49. 49. La portée et les impressions
  50. 50. Tendance à la diminution de la portée organique...
  51. 51. Le taux d’engagement
  52. 52. Métriques de mesure d’audience d’ un site web
  53. 53. Taux de rebond
  54. 54. Temps moyen par visite
  55. 55. Livres numériques : la mesure du temps d’ attention comme déclencheur d’achat : le modèle PDA (Patron Driven Acquisition)
  56. 56. source étude converteo sur la mesure d’audience, 2013 Comment mesurer?
  57. 57. source
  58. 58. http://land.augure.com/5-indicateurs-sociaux-structurants/
  59. 59. Inventer de nouveaux indicateurs spécifiques à la médiation numérique?
  60. 60. Le cadre stratégique de l’évaluation Mesurer les performances? Que mesurer? ou les limites de la norme ISO 2789 Quelles métriques de mesure d’ audience? Indicateurs de performances dans la norme ISO 11620 Comment mesurer avec la norme ISO 16439 ?
  61. 61. Le bon indicateur est SMART L’acronyme SMART est un moyen mnémotechnique utilisé dans le management de projet pour rappeler les principales caractéristiques d’un bon indicateur : Significatif, Mesurable, Acceptable, avec un Responsable de l’indicateur ou du processus, Temporellement défini. L’essentiel reste que l’indicateur soit aisément compréhensible par une pluralité d’ acteurs impliqués à des degrés divers dans le suivi de l’activité (professionnels des bibliothèques, tutelles, voire même usagers…). Source : http://www.enssib.fr/le-dictionnaire/indicateur
  62. 62. source https: //assessmentlibrarian.wordpress. com/2009/05/25/deux- presentations-sur-libqual/
  63. 63. source https: //assessmentlibrarian.wordpress. com/2009/05/25/deux- presentations-sur-libqual/
  64. 64. Evaluation de la qualité perçue
  65. 65. Evaluation de la qualité perçue
  66. 66. Evaluation de la qualité perçue
  67. 67. source : http://fr.slideshare.net/alkaselzer/iso-2789-et-iso-11620-des-outils-en-volution-pour-lobservation-et-lvaluation
  68. 68. Le cadre stratégique de l’évaluation Mesurer les performances? Que mesurer? ou les limites de la norme ISO 2789 Quelles métriques de mesure d’ audience? Indicateurs de performances dans la norme ISO 11620 Comment mesurer avec la norme ISO 16439 ?
  69. 69. Mesurer l’impact des bibliothèques? ISO 16439 Methods and procedures for assessing the impact of libraries Information et documentation — Méthodes et procédures pour évaluer l'impact des bibliothèques (Publiée en 2013 - non traduite)
  70. 70. Mesurer l’impact des bibliothèques? ISO 16439 Methods and procedures for assessing the impact of libraries Information et documentation — Méthodes et procédures pour évaluer l'impact des bibliothèques (Publiée en 2013 - non traduite)
  71. 71. La bibliothèque outil du changement social
  72. 72. La bibliothèque outil du changement social
  73. 73. ISO 16439 Methods and procedures for assessing the impact of libraries Information et documentation — Méthodes et procédures pour évaluer l'impact des bibliothèques (Publiée en 2013 - non traduite)
  74. 74. Comment mesurer des impacts? ISO 16439 Methods and procedures for assessing the impact of libraries Information et documentation — Méthodes et procédures pour évaluer l'impact des bibliothèques (Publiée en 2013 - non traduite)
  75. 75. Exemple ISO 16439 Methods and procedures for assessing the impact of libraries Information et documentation — Méthodes et procédures pour évaluer l'impact des bibliothèques (Publiée en 2013 - non traduite)
  76. 76. Combiner les méthodes
  77. 77. Combiner les méthodes
  78. 78. Calcul d’impacts économiques d’une bibliothèques : la valeur contingente
  79. 79. Calcul de ce que coûte une bibliothèque à un citoyen par rapport à ce qu’il devrait payer dans le privé pour un service équivalent
  80. 80. http://www.fesabid.org/federacion/noticia/el-estudio-realizado-por-fesabid-demuestra-el-valor-que-las- bibliotecas-aportan-a
  81. 81. Calcul d’impacts économiques d’une bibliothèques : le rapport coût-bénéfice
  82. 82. Le coût en temps par rapport au salaire des usagers! source : Livre blanc AFNOR sur ISO 16439
  83. 83. Calcul d’impacts économiques d’une bibliothèques : le coût par période
  84. 84. Le retour sur investissement source : Livre blanc AFNOR sur ISO 16439
  85. 85. l’impact économique source : Livre blanc AFNOR sur ISO 16439
  86. 86. Exemple source : Livre blanc AFNOR sur ISO 16439
  87. 87. Communiquer… oui mais à qui et comment?
  88. 88. LEWIS, Vivian (2015) Articulating Worth: Communicating the Library’s Value Proposition. Paper presented at: IFLA WLIC 2015 - Cape Town, South Africa in Session 91 - Academic and Research Libraries Management and Marketing and eMetrics SIG.
  89. 89. Aux décideurs : exemple de tableau de bord envoyé tous les mois LEWIS, Vivian (2015) Articulating Worth: Communicating the Library’s Value Proposition. Paper presented at: IFLA WLIC 2015 - Cape Town, South Africa in Session 91 - Academic and Research Libraries Management and Marketing and eMetrics SIG.
  90. 90. http://bit.ly/bpi-15 Le tableur, votre nouveau meilleur ami
  91. 91. http://bit.ly/bpi-15 Transformer un tableau de base de données Personne Propriété Valeur Emma Maison 120 Nathan Appartement 90 Lola Parking 30 Lucas Loft 100 Lola Maison 90 Lola Villa 200 Emma Parking 5
  92. 92. http://bit.ly/bpi-15https://datawrapper.de/chart/wImhQ/upload
  93. 93. http://bit.ly/bpi-15 // Mettre en évidence des évolutions
  94. 94. http://bit.ly/bpi-15
  95. 95. Visualiser! http://www.hellodata.eu/les-outils/
  96. 96. En amont...
  97. 97. Et en aval
  98. 98. Que retenir? Une nécessaire culture de l’évaluation des politiques publiques et aux normes Sensibilité aux métriques du web Utiliser les chiffres pour convaincre et communiquer : des schémas plutôt que des discours

×