SlideShare une entreprise Scribd logo
1  sur  24
Télécharger pour lire hors ligne
Le Datamart : le serveur de données
ouvertes du Service météorologique
         du Canada (SMC)


                Journée données ouvertes 2013
                Société des Arts Technologiques, Montréal
                23 février 2013
                Miguel Tremblay
                Centre météorologique canadien
Aperçu

•   MT/EC/CMC
•   Le Datamart
•   Contexte
•   Écueils
•   EM Weather




                  Page 2 – 13-02-26
Miguel Tremblay
                        • Montréal, Québec
                        • Physicien
                        • Ptaff.ca
                        • Wikipédia
                        • Environnement Canada
                          depuis 2004
                        • Contributeur principal au
                          logiciel libre METRo
                        • Responsable du contenu
                          du Datamart


              Page 3 – 13-02-26
Les régions et les centres nationaux




                         Centre météorologique
                                canadien
CMC, l'édifice
Environnement Canada
• Mandat: prévoir les conditions et les
  avertissements météorologiques quotidiens et
  fournir des renseignements météorologiques
  détaillés à l'ensemble du Canada;
• Résultat stratégique 2 : La population canadienne
  est équipée pour prendre des décisions éclairées
  quant aux conditions changeantes du temps, de
  l'eau et du climat.




                       Page 6 – 13-02-26
Le Datamart
Historique
• Tôt dans les années 2000
   – SMC adopte une politique d’accès libre à ses données
   – Veut se retirer des services commerciaux
• Doit complémenter son offre de dissémination générale:
   – WXO, WeatherRadio, 1-900, enregistrements téléphoniques, site
     média…
• En 2004
   – Création d’un dépôt de données (dd server ou datamart) pour
     rendre disponibles les données numériques du temps en format
     GRIB
• 2006:
   – Le satellite AMIS arrive à la fin de sa vie
   – Datamart devient une des alternatives pour les bulletins alpha-
     numériques

                                Page 8 – 13-02-26
Historique (suite)
• Même période:
   – Financement pour conversion de la prévision officielle en format XML
     pour usage par le secteur météo-routier ou des transports
• 2007-2010:
   – Direction des Services mentionnent besoins de leurs clients
   – ajout de plusieurs données pour des groupes d’usagers experts.
   – Gestion du contenu par la section de la Planification, des mesures de
     performance et des relations externes du Centre météorologique
     canadien

• Les fils de données nécessitant un support 24-7 toujours
  disponibles sous recouvrement de coûts



                                Page 9 – 13-02-26
Serveur de données
http://dd.meteo.gc.ca
Exemple: Citypage XML
Documentation: ASCII
Définitions
• Données ouvertes: Données publiques accessibles
    librement, dans un format ouvert* et sans restriction
    quand aux fins auxquelles elles peuvent être utilisées.
•   Format ouvert: format avec des spécifications publiques
    et sans restriction de mise en oeuvre.




                           Page 13 – 13-02-26
Serveur de données

• Accès libre et gratuit aux usagers spécialisés
    –   Formats ouverts, protocole HTTP
    –   Connaissances météo et/ou informatique
    –   Pour lecture automatique (par script)
    –   Offre complémentaire à WXO qui est pour le public en général
          ▪ dd non contraint aux exigences CLF des pages web

• Licence:
    – Condition principale d’utilisation est de donner crédit à EC
    – Usage commercial accordé
    – Plus besoin de mot de passe ou de signature
Statistiques




               Page 15 – 13-02-26
Statistiques

• 400 000 visiteurs/jour
• 10 millions fichiers téléchargés/jour (~260 Go/jour)
• Pour janvier 2013:
      –    177 millions City pages
      –    22 millions GRIB du modèle global
      –    7 millions images radar
Qui sont les clients?
• Secteur public
     • ministères provinciaux
     • sociétés d'états
     • sécurité publique
     • municipalités
•   Secteur privé
     • Secteur météo
     • Secteurs de l’agriculture, des transports, de l’énergie, de
        l’assurance,les universités, etc.
• Individus qui développent à la maison
• Clients des secteurs où la météo a un impact sur leurs
    opérations!
Applications
Météogramme
Répartition géographique
Communications
• « Contactez-nous » sur le site web
• Communications courriel (bogue, questions, demande
    d'ajouts de données)
•   Liste de diffusion: + 400 abonnés
•   Documentation




                           Page 22 – 13-02-26
Règles pour ajouter des données
• Que l’information soit déjà produite à Environnement Canada;
• Que l’information distribuée soit d'intérêt général, destinée à
    plusieurs utilisateurs;
•   Le format utilisé pour distribuer les données doit être ouvert
    (équité d’accès);
•   La production des données doit bénéficier d’un support
    opérationnel (disponibilité des données);
•   Les données doivent être documentées (le fournisseur des
    données est responsable de produire la documentation et de la
    maintenir à jour);
•   Les données sont distribuées avec la licence générale du
    Datamart (clarté et généralité des termes d’utilisation des
    données).
                            Page 23 – 13-02-26
Questions?

Contenu connexe

Similaire à Le Datamart : le serveur de données ouvertes du Service météorologique du Canada (SMC)

IGO 2.0 : nouveaux horizons
IGO 2.0 : nouveaux horizonsIGO 2.0 : nouveaux horizons
IGO 2.0 : nouveaux horizonsigouverte
 
Accès aux couches de météo officielle et dispersion atmosphérique 3D en milie...
Accès aux couches de météo officielle et dispersion atmosphérique 3D en milie...Accès aux couches de météo officielle et dispersion atmosphérique 3D en milie...
Accès aux couches de météo officielle et dispersion atmosphérique 3D en milie...ACSG - Section Montréal
 
Formation Découvrir inspire 251112
Formation Découvrir inspire 251112Formation Découvrir inspire 251112
Formation Découvrir inspire 251112Marc Leobet
 
Programme 2009 Opération Datacenters
Programme 2009 Opération DatacentersProgramme 2009 Opération Datacenters
Programme 2009 Opération Datacentersregionalpartner56
 
Futures Communautés d'Energie Renouvelable | Tournai - 03 décembre 2019
Futures Communautés d'Energie Renouvelable | Tournai - 03 décembre 2019Futures Communautés d'Energie Renouvelable | Tournai - 03 décembre 2019
Futures Communautés d'Energie Renouvelable | Tournai - 03 décembre 2019Cluster TWEED
 
Act 00018 architecture ouverte pour une gestion optimale de l’information géo...
Act 00018 architecture ouverte pour une gestion optimale de l’information géo...Act 00018 architecture ouverte pour une gestion optimale de l’information géo...
Act 00018 architecture ouverte pour une gestion optimale de l’information géo...ACSG Section Montréal
 
Act 00018 architecture ouverte pour une gestion optimale de l’information géo...
Act 00018 architecture ouverte pour une gestion optimale de l’information géo...Act 00018 architecture ouverte pour une gestion optimale de l’information géo...
Act 00018 architecture ouverte pour une gestion optimale de l’information géo...ACSG - Section Montréal
 
Stratégie nationale de données d’élévation: État d'avancement, progrès et exp...
Stratégie nationale de données d’élévation: État d'avancement, progrès et exp...Stratégie nationale de données d’élévation: État d'avancement, progrès et exp...
Stratégie nationale de données d’élévation: État d'avancement, progrès et exp...ACSG - Section Montréal
 
REMOcRA : offrir un outil décisionnel aux sapeurs-pompiers
REMOcRA : offrir un outil décisionnel aux sapeurs-pompiersREMOcRA : offrir un outil décisionnel aux sapeurs-pompiers
REMOcRA : offrir un outil décisionnel aux sapeurs-pompiersAtol Conseils et Développements
 
REMOcRA : offrir un outil décisionnel aux sapeurs-pompiers
REMOcRA : offrir un outil décisionnel aux sapeurs-pompiersREMOcRA : offrir un outil décisionnel aux sapeurs-pompiers
REMOcRA : offrir un outil décisionnel aux sapeurs-pompiersATOL Conseils et Développements
 
Accès à l’information géographique sur la gestion et l’aménagement du territo...
Accès à l’information géographique sur la gestion et l’aménagement du territo...Accès à l’information géographique sur la gestion et l’aménagement du territo...
Accès à l’information géographique sur la gestion et l’aménagement du territo...VisionGÉOMATIQUE2012
 
Act 00068 la stratégie d’élévation nationale
Act 00068 la stratégie d’élévation nationaleAct 00068 la stratégie d’élévation nationale
Act 00068 la stratégie d’élévation nationaleACSG - Section Montréal
 
Act 00068 la stratégie d’élévation nationale
Act 00068 la stratégie d’élévation nationaleAct 00068 la stratégie d’élévation nationale
Act 00068 la stratégie d’élévation nationaleACSG Section Montréal
 
Petit-déjeuner OCTO Technology : Calculez vos indicateurs en temps réel ave...
Petit-déjeuner OCTO Technology :  Calculez vos indicateurs en temps réel ave...Petit-déjeuner OCTO Technology :  Calculez vos indicateurs en temps réel ave...
Petit-déjeuner OCTO Technology : Calculez vos indicateurs en temps réel ave...OCTO Technology
 
Repercussions economiques et technologiques du pacte energetique en Wallonie ...
Repercussions economiques et technologiques du pacte energetique en Wallonie ...Repercussions economiques et technologiques du pacte energetique en Wallonie ...
Repercussions economiques et technologiques du pacte energetique en Wallonie ...Cluster TWEED
 
GDF SUEZ Dolce Vita mise sur le tag management pour piloter sa performance di...
GDF SUEZ Dolce Vita mise sur le tag management pour piloter sa performance di...GDF SUEZ Dolce Vita mise sur le tag management pour piloter sa performance di...
GDF SUEZ Dolce Vita mise sur le tag management pour piloter sa performance di...Commanders Act
 
Intervention French Tech Brest + (Roscoff) - 07/10/2016
Intervention French Tech Brest + (Roscoff) - 07/10/2016Intervention French Tech Brest + (Roscoff) - 07/10/2016
Intervention French Tech Brest + (Roscoff) - 07/10/2016Tourisme & Territoires
 
Réflexions sur les missions et les compétences liées à une démarche data terr...
Réflexions sur les missions et les compétences liées à une démarche data terr...Réflexions sur les missions et les compétences liées à une démarche data terr...
Réflexions sur les missions et les compétences liées à une démarche data terr...Mairie de Paris
 
Programme données ouvertes et intelligentes en Région Provence Alpes-Côte d'Azur
Programme données ouvertes et intelligentes en Région Provence Alpes-Côte d'AzurProgramme données ouvertes et intelligentes en Région Provence Alpes-Côte d'Azur
Programme données ouvertes et intelligentes en Région Provence Alpes-Côte d'AzurOpenPaca
 

Similaire à Le Datamart : le serveur de données ouvertes du Service météorologique du Canada (SMC) (20)

IGO 2.0 : nouveaux horizons
IGO 2.0 : nouveaux horizonsIGO 2.0 : nouveaux horizons
IGO 2.0 : nouveaux horizons
 
Accès aux couches de météo officielle et dispersion atmosphérique 3D en milie...
Accès aux couches de météo officielle et dispersion atmosphérique 3D en milie...Accès aux couches de météo officielle et dispersion atmosphérique 3D en milie...
Accès aux couches de météo officielle et dispersion atmosphérique 3D en milie...
 
Formation Découvrir inspire 251112
Formation Découvrir inspire 251112Formation Découvrir inspire 251112
Formation Découvrir inspire 251112
 
Programme 2009 Opération Datacenters
Programme 2009 Opération DatacentersProgramme 2009 Opération Datacenters
Programme 2009 Opération Datacenters
 
Futures Communautés d'Energie Renouvelable | Tournai - 03 décembre 2019
Futures Communautés d'Energie Renouvelable | Tournai - 03 décembre 2019Futures Communautés d'Energie Renouvelable | Tournai - 03 décembre 2019
Futures Communautés d'Energie Renouvelable | Tournai - 03 décembre 2019
 
Act 00018 architecture ouverte pour une gestion optimale de l’information géo...
Act 00018 architecture ouverte pour une gestion optimale de l’information géo...Act 00018 architecture ouverte pour une gestion optimale de l’information géo...
Act 00018 architecture ouverte pour une gestion optimale de l’information géo...
 
Act 00018 architecture ouverte pour une gestion optimale de l’information géo...
Act 00018 architecture ouverte pour une gestion optimale de l’information géo...Act 00018 architecture ouverte pour une gestion optimale de l’information géo...
Act 00018 architecture ouverte pour une gestion optimale de l’information géo...
 
Stratégie nationale de données d’élévation: État d'avancement, progrès et exp...
Stratégie nationale de données d’élévation: État d'avancement, progrès et exp...Stratégie nationale de données d’élévation: État d'avancement, progrès et exp...
Stratégie nationale de données d’élévation: État d'avancement, progrès et exp...
 
REMOcRA : offrir un outil décisionnel aux sapeurs-pompiers
REMOcRA : offrir un outil décisionnel aux sapeurs-pompiersREMOcRA : offrir un outil décisionnel aux sapeurs-pompiers
REMOcRA : offrir un outil décisionnel aux sapeurs-pompiers
 
REMOcRA : offrir un outil décisionnel aux sapeurs-pompiers
REMOcRA : offrir un outil décisionnel aux sapeurs-pompiersREMOcRA : offrir un outil décisionnel aux sapeurs-pompiers
REMOcRA : offrir un outil décisionnel aux sapeurs-pompiers
 
Accès à l’information géographique sur la gestion et l’aménagement du territo...
Accès à l’information géographique sur la gestion et l’aménagement du territo...Accès à l’information géographique sur la gestion et l’aménagement du territo...
Accès à l’information géographique sur la gestion et l’aménagement du territo...
 
Survol du mouvement des données ouvertes au Canada et au Québec
Survol du mouvement des données ouvertes  au Canada et au QuébecSurvol du mouvement des données ouvertes  au Canada et au Québec
Survol du mouvement des données ouvertes au Canada et au Québec
 
Act 00068 la stratégie d’élévation nationale
Act 00068 la stratégie d’élévation nationaleAct 00068 la stratégie d’élévation nationale
Act 00068 la stratégie d’élévation nationale
 
Act 00068 la stratégie d’élévation nationale
Act 00068 la stratégie d’élévation nationaleAct 00068 la stratégie d’élévation nationale
Act 00068 la stratégie d’élévation nationale
 
Petit-déjeuner OCTO Technology : Calculez vos indicateurs en temps réel ave...
Petit-déjeuner OCTO Technology :  Calculez vos indicateurs en temps réel ave...Petit-déjeuner OCTO Technology :  Calculez vos indicateurs en temps réel ave...
Petit-déjeuner OCTO Technology : Calculez vos indicateurs en temps réel ave...
 
Repercussions economiques et technologiques du pacte energetique en Wallonie ...
Repercussions economiques et technologiques du pacte energetique en Wallonie ...Repercussions economiques et technologiques du pacte energetique en Wallonie ...
Repercussions economiques et technologiques du pacte energetique en Wallonie ...
 
GDF SUEZ Dolce Vita mise sur le tag management pour piloter sa performance di...
GDF SUEZ Dolce Vita mise sur le tag management pour piloter sa performance di...GDF SUEZ Dolce Vita mise sur le tag management pour piloter sa performance di...
GDF SUEZ Dolce Vita mise sur le tag management pour piloter sa performance di...
 
Intervention French Tech Brest + (Roscoff) - 07/10/2016
Intervention French Tech Brest + (Roscoff) - 07/10/2016Intervention French Tech Brest + (Roscoff) - 07/10/2016
Intervention French Tech Brest + (Roscoff) - 07/10/2016
 
Réflexions sur les missions et les compétences liées à une démarche data terr...
Réflexions sur les missions et les compétences liées à une démarche data terr...Réflexions sur les missions et les compétences liées à une démarche data terr...
Réflexions sur les missions et les compétences liées à une démarche data terr...
 
Programme données ouvertes et intelligentes en Région Provence Alpes-Côte d'Azur
Programme données ouvertes et intelligentes en Région Provence Alpes-Côte d'AzurProgramme données ouvertes et intelligentes en Région Provence Alpes-Côte d'Azur
Programme données ouvertes et intelligentes en Région Provence Alpes-Côte d'Azur
 

Le Datamart : le serveur de données ouvertes du Service météorologique du Canada (SMC)

  • 1. Le Datamart : le serveur de données ouvertes du Service météorologique du Canada (SMC) Journée données ouvertes 2013 Société des Arts Technologiques, Montréal 23 février 2013 Miguel Tremblay Centre météorologique canadien
  • 2. Aperçu • MT/EC/CMC • Le Datamart • Contexte • Écueils • EM Weather Page 2 – 13-02-26
  • 3. Miguel Tremblay • Montréal, Québec • Physicien • Ptaff.ca • Wikipédia • Environnement Canada depuis 2004 • Contributeur principal au logiciel libre METRo • Responsable du contenu du Datamart Page 3 – 13-02-26
  • 4. Les régions et les centres nationaux Centre météorologique canadien
  • 6. Environnement Canada • Mandat: prévoir les conditions et les avertissements météorologiques quotidiens et fournir des renseignements météorologiques détaillés à l'ensemble du Canada; • Résultat stratégique 2 : La population canadienne est équipée pour prendre des décisions éclairées quant aux conditions changeantes du temps, de l'eau et du climat. Page 6 – 13-02-26
  • 8. Historique • Tôt dans les années 2000 – SMC adopte une politique d’accès libre à ses données – Veut se retirer des services commerciaux • Doit complémenter son offre de dissémination générale: – WXO, WeatherRadio, 1-900, enregistrements téléphoniques, site média… • En 2004 – Création d’un dépôt de données (dd server ou datamart) pour rendre disponibles les données numériques du temps en format GRIB • 2006: – Le satellite AMIS arrive à la fin de sa vie – Datamart devient une des alternatives pour les bulletins alpha- numériques Page 8 – 13-02-26
  • 9. Historique (suite) • Même période: – Financement pour conversion de la prévision officielle en format XML pour usage par le secteur météo-routier ou des transports • 2007-2010: – Direction des Services mentionnent besoins de leurs clients – ajout de plusieurs données pour des groupes d’usagers experts. – Gestion du contenu par la section de la Planification, des mesures de performance et des relations externes du Centre météorologique canadien • Les fils de données nécessitant un support 24-7 toujours disponibles sous recouvrement de coûts Page 9 – 13-02-26
  • 13. Définitions • Données ouvertes: Données publiques accessibles librement, dans un format ouvert* et sans restriction quand aux fins auxquelles elles peuvent être utilisées. • Format ouvert: format avec des spécifications publiques et sans restriction de mise en oeuvre. Page 13 – 13-02-26
  • 14. Serveur de données • Accès libre et gratuit aux usagers spécialisés – Formats ouverts, protocole HTTP – Connaissances météo et/ou informatique – Pour lecture automatique (par script) – Offre complémentaire à WXO qui est pour le public en général ▪ dd non contraint aux exigences CLF des pages web • Licence: – Condition principale d’utilisation est de donner crédit à EC – Usage commercial accordé – Plus besoin de mot de passe ou de signature
  • 15. Statistiques Page 15 – 13-02-26
  • 16. Statistiques • 400 000 visiteurs/jour • 10 millions fichiers téléchargés/jour (~260 Go/jour) • Pour janvier 2013: – 177 millions City pages – 22 millions GRIB du modèle global – 7 millions images radar
  • 17. Qui sont les clients? • Secteur public • ministères provinciaux • sociétés d'états • sécurité publique • municipalités • Secteur privé • Secteur météo • Secteurs de l’agriculture, des transports, de l’énergie, de l’assurance,les universités, etc. • Individus qui développent à la maison • Clients des secteurs où la météo a un impact sur leurs opérations!
  • 19.
  • 22. Communications • « Contactez-nous » sur le site web • Communications courriel (bogue, questions, demande d'ajouts de données) • Liste de diffusion: + 400 abonnés • Documentation Page 22 – 13-02-26
  • 23. Règles pour ajouter des données • Que l’information soit déjà produite à Environnement Canada; • Que l’information distribuée soit d'intérêt général, destinée à plusieurs utilisateurs; • Le format utilisé pour distribuer les données doit être ouvert (équité d’accès); • La production des données doit bénéficier d’un support opérationnel (disponibilité des données); • Les données doivent être documentées (le fournisseur des données est responsable de produire la documentation et de la maintenir à jour); • Les données sont distribuées avec la licence générale du Datamart (clarté et généralité des termes d’utilisation des données). Page 23 – 13-02-26