Open data : faire parler les données
•
3 j'aime•1,022 vues
Conférence sur l'open data ayant eu lieu le 19 septembre 2017 lors du digital tour ima 2017 : - Qu’est-ce que l’Open Data ? - Quelles sont les données ouvertes ? - Comment valoriser les données ? - Rex : 48h pour faire parler les données ouvertes
Recommandé
Recommandé
Contenu connexe
En vedette
En vedette (20)
Similaire à Open data : faire parler les données
Similaire à Open data : faire parler les données (20)
Open data : faire parler les données
- 1. F U N# G E N I E U R
- 6. Page ‹N°›Public SII ➢ Qu’est-ce que l’Open Data ? Public SII Définition : données ouvertes "U ne donnée ouverte est une donnée qui peut être librement utilisée, réutilisée et redistribuée par quiconque - sujette seulement, au plus, à une exigence d’attribution et de partage à l’identique. " Exploitable RéutilisableAccessible Donnée Ouverte TECHNIQUE JURIDIQUEORGANISATIONNEL Pour être « open data » une donnée doit être : ✓Accessible électroniquement de façon pérenne ✓Complète, ✓Lisible par une machine, ✓Dans un format ouvert, ✓Disponible sous licence claire.
- 8. Page ‹N°›Public SII ➢ Qu’est-ce que l’Open Data ? Public SII "Toutes les données ouvertes sont accessibles au public, mais toutes les données accessibles au public ne sont pas ouvertes" Données disponibles, données ouvertes Carte Foresaère de l’IGN ➡ 0-100km2 : 29.93€ ➡ 10.000 – 100.000 km2 : 7 344.93 € Meteo France ➡ Modèle de prévision (annuel) : 50 000 € ➡ Accès annuel aux données climatologiques de base : 200 000 €
- 12. Page ‹N°›Public SII ➢ Qu’est-ce que l’Open Data ? Public SII Les licences pour l’Open Data LICENCE DOMAINE PUBLIC OU ATTRIBUTIVE 4 droits 1. celui d’uiliser, 2. d’étudier, 3. de modifier 4. et de redistribuer les modificaions Licences à votre disposition LO : Licence ouverte, Exemple data.gouv.fr LICENCE CONTRIBUTIVE Ajout d’une clause « copyleft » 5. Partage à l’idenique Licences à votre disposition ODbl : Open Database Licence Exemple Wikipedia ; Open Street Map
- 13. Page ‹N°›Public SII ➢ Qu’est-ce que l’Open Data ? Public SII Une brève histoire de l’Open Data 1995 Le terme d’open data apparaît pour la 1ère fois, dans un document d’une agence scienifique américaine 2011 Lancement du projet data.gouv.fr, 2013 Créaion de l’associaion Opendata France 1789 Déclaraaon des droits de l’Homme et du Citoyen, aracle XV : “La Société a le droit de demander compte à tout Agent public de son administra8on” 2008 Elecion de Barack Obama (adopion du concept)2009 Lancement du projet data.gov (US) Définiaon du concept des données ouvertes et publiques (Réunion de Sébastopol) Tim O’Reilly : auteur et éditeur américain, avant-garde informaique et Internet. Lawrence Lessig : professeur de droit à Stanford est l’iniiateur des licences Creaive Commons. Aaron Swartz : inventeur du système de flux RSS et militant de la connaissance libre. 2007
- 16. Page ‹N°›Public SII ➢ Qu’est-ce que l’Open Data ? Public SII L’Open Data en France 150 Collectivités « ouvertes » • 8 Régions • 17 Départements • 13 Métropoles • Nombreuses petites ou moyennes villes 19 500 jeux de données • Dont 45% de données Géographiques • 50% Licence Ouverte vs 50% OdbL • 80% Portail local, 20% portail régional ou national • Editeurs spécialisés (20% du marché) 346 applications utilisatrices • 76% applications mobiles • 40 Appels à projet et Hackathons Etat/ Etalab • Portail du gouvernement : data.gouv.fr • 224 Services Publics • 28 000 datasets issus du gouv. et de ses agences
- 20. ➢ Quelles sont les données ouvertes ? Page ‹N°›Public SII Public SII La thématique des transports et des déplacements domine très largement. Les données géographiques sont très présentes sur les plateformes. Au Grand Lyon par exemple, elles représentent 95% des données mises en ligne. Quelles sont les données ouvertes ?
- 24. ➢ Quelles sont les données ouvertes ? Page ‹N°›Public SII Public SII Statistiques de créations d'actes d'état civil, cimetières, liste des prénoms, historique des fils d'attente du service état civil, recensement de la population, diagnostic territorial, aires d'accueil. Filae L'entreprise privée Filae (ex genealogie.com) a profité début décembre 2016 de l'absence de mise en conformité des archives départementales avec la loi Valter pour réuiliser à des fins commerciales les données numérisées par ces départements. Ancestry Au niveau internaional Ancestry propose de nombreux services de généalogie et s’appuie sur un nombre important de jeux de données publiques ouvertes. Etat-civil, démographie, population
- 25. ➢ Quelles sont les données ouvertes ? Page ‹N°›Public SII Public SII Commerces, revenus fiscaux, emploi, entreprise, activités économiques, distributeurs de billets, liste des marchés, politique de développement, aménagement du territoire, économie sociale, agriculture. Economie DatainfoGreffe La nouvelle plateforme Datainfogreffe permet d'accéder en libre accès aux jeux de données sur les sociétés commerciales. Naguère payantes, ces données d'uilité publique sont désormais gratuites. 3 millions d’entreprises, 2 millions de visites chaque mois SIREN Depuis le 1er janvier 2017, la plus grande base de données existante sur l’état-civil des entreprises. 10 millions d’établissements ac;fs mis à jour le 1er de chaque mois Data Publica (C-Radar) Entreprise Française qui propose différents services sur le marché de la donnée dont un portail de données publiques.
- 26. ➢ Quelles sont les données ouvertes ? Page ‹N°›Public SII Public SII Zone artistique temporaire, emprunts et réservations bibliothèques, agendas culturels, lieu de tournage de films, liste des ouvrages de bibliothèques, statistiques de prêts, statistiques de fréquentation d'expositions, prêts d’œuvres du musée, annuaires, campings, hôtels, chambres d'hôtes, lieux de visite, restaurants, photographies des monuments, monuments et sites classés, inventaire équipements, inventaire patrimoine, liste des bibliothèques, gîtes communaux, ambassades. Art, Culture, Patrimoine et Tourisme Bibliothèque Naaonale de France Le projet s’inscrit dans une démarche d’ouverture de la BnF au Web de données et d’adopion des standards du Web sémanique. Les données brutes de data.bnf.fr sont disponibles selon la Licence ouverte française, uilisée par data.gouv.fr CultureClic, la culture augmentée 850 œuvres et documents, 1350 musées et monuments en réalité augmentée. DataTourisme La plateforme Open Data de l’informaion tourisique et documents (API disponible fin d’année 2017).
- 34. ➢ Comment valoriser les données ? Public SII Monétisation de la donnée ou le Data Marketing Le « Big data » se mue en « Data Markeang » lorsqu'il met les données au service d'un markeang plus performant. Quelques chiffres • 85% des organisaaons envisagent d'échanger leurs données avec des aers* • 27% ont iniaé une réflexion autour de la monéasaaon de la donnée • Gartner esime qu’à l’horizon 2017, 30% des entreprises mondiales seront amenées à commercialiser leurs données Pourquoi ouvrir ses données ? On va me disputer On va comprendre ma stratégie Il va y avoir un problème de sécurité Pourquoi investir dans l’analyse des mes datas quand j’ai d’autres chantier à aborder ? Améliorer l’expérience consommateur Générer des nouveaux clients ou des revenus complémentaires Réduire les coûts tout en s’améliorant Conserver une position de leader « Fin mars 2017, Google fait sensation en annonçant la mort prochaine du moteur de recherche tel que nous le connaissons aujourd’hui pour rentrer peu à peu dans « l’ère de l’assistance ». DataMarketing Paris, 16&17 novembre 2017 https://datamarketingparis.com https://www.thinkwithgoogle.com
- 35. ➢ Comment valoriser les données ? Public SII Open Data et Open Innovation L’Open Innovation (innovation ouverte) est le paradigme selon lequel une entreprise a adapté sa stratégie complète d’innovation afin de tirer le meilleur parti du microcosme qui l’entoure. Cela consiste notamment : • à maximiser le recours à des solutions développées en EXTERNE • à monétiser des technologies développées en INTERNE.
- 36. ➢ Comment valoriser les données ? Public SII Self Data La production, l’exploitation et le partage de données personnelles par les individus, sous leur contrôle et à leurs propres fins. • Self Data en France, • Mydata en Finlande, • Midata en Angleterre, • Smart Disclosure aux Etats-Unis, • VRM (Vendor RelationShip Management), • Quantified Self, Devenir l’acteur de ses données personnelles : contrôler ses données ; faire des choix ; ou encore contribuer à des projets collectifs 1. Un individu obtient ses données personnelles des organisations avec lesquelles il est en relation et en ajoute d’autres qu’il capte ou produit lui-même. 2. Il les stocke et les administre de manière sécurisée (par exemple à l’aide de Pims – Personal Information Management Systems, comme les Cloud Personnels) 3. Et il les exploite à ses propres fins à l’aide d’applications et de services tiers Ticket de caisse, déplacements, SMS, appels, publications réseaux sociaux, navigation web, formation et emploi, données administratives Les organisations vont également y gagner, en retrouvant la confiance et la fidélité de leurs clients, en améliorant la qualité des données et en gagnant en compétitivité. http://mesinfos.fing.org/
- 39. ➢ REX Public SII REX : 48h pour faire parler les données open data de la ville de La Rochelle DATA LE PROJET 348 Datasets EXTRACTION 1,5 Go de données TRAITEMENT +4 Millions de records INDEXATION VISUALISATION Intégration Adaptable
- 41. ➢ REX Public SII Définit à quel point les données sont localisables par l’utilisateur. Moteur de recherche du portail Google (1er résultat retour le portail) Catalogue des métadonnées Détails • Catégorie : Gestion Interne • Sous Catégorie : File d’attente du service Etat-Civil • Mots clés : attente file Visibilité
- 42. ➢ REX Public SII Définit à quel point les données apportent une valeur ajoutée dans leur utilisation • Combien de tickets par jour, semaine, mois, année ? • Combien de tickets par service ? • Combien de tickets par site ? • Quel est le délai d’attente mini, moyen, max ? • Quel est le délai d’attente en temps réel ? Qualité de service : la prévision du délai d’attente Utilité
- 44. ➢ REX Public SII Définit à quel point les données portent l’information de leur provenance. Source d’origine Identification du producteur Métadonnées Techniques (RDF,CSV,TXT,JSON) Processus de transformation subi avant publication Détails • Producteur : VLR - Etat civil, formalités et élections • Origine : File d’attente et ticket du service Etat-Civil • Propriété intellectuelle : Ville de La Rochelle Traçabilité
- 46. ➢ REX Public SII Définit le niveau de couverture avec lequel le phénomène observé est représenté dans l’assemblage des données. Information manquante ou non cohérente L’identifiant et le numéro du dernier ticket appelé = dernier ticket retiré ET l’heure du dernier ticket retiré est présente MAIS l’heure du dernier ticket appelé est vide / nulle "data": [{ "file_heure_dern_ticket_appele": null, "file_id_dern_ticket_appele": "2-2010-8-24-2", "file_id_dern_ticket_retire": "2-2010-8-24-2", "file_num_dern_ticket_retire": 991, "file_num_dern_ticket_appele": 991, "file_heure_dern_ticket_retire": Tue Aug 24 17: 57: 42 CEST 2010 }] Complétude
- 50. ➢ REX Public SII Définit à quel point la confidentialité des informations personnelles est préservée. Aucune référence vers la personne ayant retirée un ticket La CNIL recommande de ne pas faire figurer de statistiques conçues à partir d'une agrégation inférieure à dix éléments Autre exemple, l’agrégation des données par mois, afin d’anonymiser. Confidentialité
- 51. ➢ REX Public SII Définit à quel point les données sont riches et précises en terme de lien vers des sources externe complémentaires. Pas de format RDF (linked data) Pas de liens vers d’autres sources (le site par exemple, pour géolocalisation, horaire, etc.) Interconnexion RDF (modèle de description de données sous forme de graphes) Faire du RDF consiste, à écrire l'équivalent de phrases simples pour que des machines puissent se parler et échanger des données de façon intelligente.