SlideShare une entreprise Scribd logo
1  sur  22
Télécharger pour lire hors ligne
OpenMeteoData
Les données météo accessibles à tous




                               Nicolas BALDECK
                               SOTM-FR, 24 février 2013
Naissance du projet
●   Février 2012 : Météo pour le parapente
    –   Besoin de paramètres très spécialisés
    –   Evolution en 3D : Carte classique non adaptée
Problème n°1 :
Où trouver la matière première ?

                                                      10⁵ € par an,
                                                  même pour un usage personnel

 (organisation météo europééne)


                                                Données gratuites,
                                                dans le domaine public
                                  Mais pas très fines en Europe
                                  (ex : GFS ne voit pas les Alpes...)
                                  Nécéssitent des calculs supplémentaires


                                      ●   Souvent basé sur les
     API privées                          données américaines.
                                      ●   Catalogue très sommaire
Problème n° 2 :
Trouver des données suffisament
            précises




Grande majorité de   Ne voit pas les vallées !
l'offre internet
Solution

Données météo          Données géographiques
globales               locales




                Modèle local
                   WRF

                À la maison
                                      Prévis affinées
Problème n°3 :
La puissance de calcul

         Prévisions vol libre à 2.5km :
         3h30 de calcul pour 12h simulées
         Doubler la résolution fait
         quadrupler le temps de calcul




             Matériel de 2008
             28 CPU
             112 Go de RAM
             4kW
Solution :
  ●   Mutualiser !
 Actuel : chacun son petit modèle
 dans son coin

RASP France     Infoclimat   Météo60
                                            OpenMeteoData
RASP FIVL       Météociel    Météorologic

RASP
                                                                         u s!
                                                                   -vo
Soaringmeteo.   Windguru     LaMMA
ch                                                                z
                                                             erve
RASP UK         Kéraunos
                              et des                        S
                              centaines
                              d'autres...

      © Réutilisation Interdite
L'expérience du Vol Libre
●   Partenariat avec la FFVL
●   Sites internets dédiés
    ex : http://meteo-parapente.com
●   Réussite totale
    –   Retours très positifs
    –   Prévis fiables
    –   « une révolution »


Utilisation au Championnat
d'Europe de Parapente,
septembre dernier
OpenMeteoData

               La météo, pour tous


Deux axes :


Supercalculateur        Faciliter l'accès aux
crowndfunded            données des institutions
pour un gros modèle     publiques
local
Le modèle local




●   développé par les agences gouvernementales US,
●   la référence pour la recherche et l'opérationel.
●   Logiciel libre.
Le calculateur
●    Technologies HPC, comme ceux du top500
●    Réseau Infiniband
●    Xéon E5-2600

        une dizaine de CPU actuellement
                                                      merci
        Datacenter à Paris
                                                       merci
    Principe :
      Le mieux avec les moyens qu'on a...
      Si vous voulez des meilleures prévis, aidez nous à développer
      l'infrastructure
Projet ouvert / collaboratif   Calculateur crowdfunded       Super prévis




                                                         •    startups
                                                         •    développeurs
                                                         •    passionnés
                                                         •    professionnels
                                               ODbL      •    collectivités
Expérience d'Open Science

•   Comité d'experts scientifiques
météorologues, chercheurs, thésards, retraités


•   Collaboration avec les universités
Mais aussi...
Données libres mais introuvables

                                       Pollution de l'air sur toute
                                       l'europe :
  modélisations et archives vagues /
  vent / courants




- modèles régionaux
- mesures satellites
- données scientifiques
- ...
Moteur de recherche universel



                                                                                     Filtres
                                                                                     précis




                                                                                  jeux de données
                                                                                  correspondants




                                                  Code pour récuperer ces données via un
Infos, specs, licence..   Panier   Télécharger    langage de programmation
                                   la sélection   Python / Java / C++ / PHP ...
Logiciel / librairie client
request = new OMD::Request();

request.area = new OMD::LatLonSquare(
                          [44, 5],
                                                                    - Interface programmable
                          [44, 10],                                  •   Python
                          [40, 10],                                  •   C++
                          [40, 5]
                                                                     •   Perl
                          );
                                                                     •   PHP
request.altitudes = new OMD::AltitudeRange(0, 1000, METERS, AGL);    •   Javascript
request.run = LATEST;
request.time = TOMORROW;
                                                                     •   etc...
request.parameters = ["t", "td", "wind_u", "wind_v"];
                                                                    - Ligne de commande
try {
                                                                    - Interface graphique
        request.download();
        print(request.getJSON());

        } catch (RequestException e) {
              print(e.type);
              print(e.message);
        }
Bientôt les données Météo France ?
Ou pas...
Partenaires




              fabricant de matériel parapente
Wanted !

●   Mirroirs
●   Bande passante
●   Matériel
    http://openmeteodata.org/#HardwareWanted
●   Support financier
●   Collaborations scientifiques et techniques
●   Conférences
+ d'infos

   Lancement bêta en Mars !
   http://openmeteodata.org

   nicolas.baldeck@openmeteodata.org



           @OpenMeteoData

Aperçu des "anciennes" prévis, version parapente :
                                                     SoData !   14 Mars, IGN
http://meteo-parapente.com/                          Sodata.org Saint Mandé

Contenu connexe

Similaire à Omd sotmfr

Ouvrir les données météorologiques pour la recherche - OpenMeteoData - confér...
Ouvrir les données météorologiques pour la recherche - OpenMeteoData - confér...Ouvrir les données météorologiques pour la recherche - OpenMeteoData - confér...
Ouvrir les données météorologiques pour la recherche - OpenMeteoData - confér...Nicolas Baldeck
 
7 Open Meteo Data - datatuesday 26 fev 2013
7   Open Meteo Data - datatuesday 26 fev 20137   Open Meteo Data - datatuesday 26 fev 2013
7 Open Meteo Data - datatuesday 26 fev 2013Data Tuesday
 
7 baldeck-omd-datatuesday-130228102458-phpapp01
7 baldeck-omd-datatuesday-130228102458-phpapp017 baldeck-omd-datatuesday-130228102458-phpapp01
7 baldeck-omd-datatuesday-130228102458-phpapp01gtll_systematic
 
Simulagora au service d'un grand défi industriel
Simulagora au service d'un grand défi industrielSimulagora au service d'un grand défi industriel
Simulagora au service d'un grand défi industrielLogilab
 
slides_conf_sur_AI_big_data_par_Françoise_Soulié-Fogelman
slides_conf_sur_AI_big_data_par_Françoise_Soulié-Fogelmanslides_conf_sur_AI_big_data_par_Françoise_Soulié-Fogelman
slides_conf_sur_AI_big_data_par_Françoise_Soulié-Fogelmanshuai wang
 
Vision et poc EDFsur les enjeux big data
Vision et poc EDFsur les enjeux big dataVision et poc EDFsur les enjeux big data
Vision et poc EDFsur les enjeux big dataBruno Patin
 
Slides trophee big data
Slides trophee big dataSlides trophee big data
Slides trophee big dataPiero Geiger
 
D'où vient l'idée d'OpenMeteoData ?
D'où vient l'idée d'OpenMeteoData ?D'où vient l'idée d'OpenMeteoData ?
D'où vient l'idée d'OpenMeteoData ?Nicolas Baldeck
 
Protei by Cesar Harada @ ENSCI Paris 20121010
Protei by Cesar Harada @ ENSCI Paris 20121010Protei by Cesar Harada @ ENSCI Paris 20121010
Protei by Cesar Harada @ ENSCI Paris 20121010Cesar Harada
 
20160216 - From BigData to BigProcessing
20160216 - From BigData to BigProcessing20160216 - From BigData to BigProcessing
20160216 - From BigData to BigProcessingPierre-Marie Brunet
 
15 03 16_data sciences pour l'actuariat_f. soulie fogelman
15 03 16_data sciences pour l'actuariat_f. soulie fogelman15 03 16_data sciences pour l'actuariat_f. soulie fogelman
15 03 16_data sciences pour l'actuariat_f. soulie fogelmanArthur Charpentier
 
.NET Microframework: du code, de l’électronique, de la robotique
.NET Microframework: du code, de l’électronique, de la robotique.NET Microframework: du code, de l’électronique, de la robotique
.NET Microframework: du code, de l’électronique, de la robotiqueMicrosoft
 
Quelles stratégies de Recherche avec Cassandra ?
Quelles stratégies de Recherche avec Cassandra ?Quelles stratégies de Recherche avec Cassandra ?
Quelles stratégies de Recherche avec Cassandra ?Victor Coustenoble
 
SensLab Anr Stic2010
SensLab Anr Stic2010SensLab Anr Stic2010
SensLab Anr Stic2010Eric Fleury
 
Pérennisation et mise à disposition des données de l’Observatoire de recherch...
Pérennisation et mise à disposition des données de l’Observatoire de recherch...Pérennisation et mise à disposition des données de l’Observatoire de recherch...
Pérennisation et mise à disposition des données de l’Observatoire de recherch...Lesticetlart Invisu
 
Présentation au GéoCamp Lyon de janvier2014
Présentation au GéoCamp Lyon de janvier2014Présentation au GéoCamp Lyon de janvier2014
Présentation au GéoCamp Lyon de janvier2014Sylvain Maillard
 
Problématique du devenir des données au Centre de Calcul de l'IN2P3 - Pascal ...
Problématique du devenir des données au Centre de Calcul de l'IN2P3 - Pascal ...Problématique du devenir des données au Centre de Calcul de l'IN2P3 - Pascal ...
Problématique du devenir des données au Centre de Calcul de l'IN2P3 - Pascal ...Lesticetlart Invisu
 
Petit-déjeuner OCTO Technology : Calculez vos indicateurs en temps réel ave...
Petit-déjeuner OCTO Technology :  Calculez vos indicateurs en temps réel ave...Petit-déjeuner OCTO Technology :  Calculez vos indicateurs en temps réel ave...
Petit-déjeuner OCTO Technology : Calculez vos indicateurs en temps réel ave...OCTO Technology
 

Similaire à Omd sotmfr (20)

Ouvrir les données météorologiques pour la recherche - OpenMeteoData - confér...
Ouvrir les données météorologiques pour la recherche - OpenMeteoData - confér...Ouvrir les données météorologiques pour la recherche - OpenMeteoData - confér...
Ouvrir les données météorologiques pour la recherche - OpenMeteoData - confér...
 
7 Open Meteo Data - datatuesday 26 fev 2013
7   Open Meteo Data - datatuesday 26 fev 20137   Open Meteo Data - datatuesday 26 fev 2013
7 Open Meteo Data - datatuesday 26 fev 2013
 
7 baldeck-omd-datatuesday-130228102458-phpapp01
7 baldeck-omd-datatuesday-130228102458-phpapp017 baldeck-omd-datatuesday-130228102458-phpapp01
7 baldeck-omd-datatuesday-130228102458-phpapp01
 
Simulagora au service d'un grand défi industriel
Simulagora au service d'un grand défi industrielSimulagora au service d'un grand défi industriel
Simulagora au service d'un grand défi industriel
 
slides_conf_sur_AI_big_data_par_Françoise_Soulié-Fogelman
slides_conf_sur_AI_big_data_par_Françoise_Soulié-Fogelmanslides_conf_sur_AI_big_data_par_Françoise_Soulié-Fogelman
slides_conf_sur_AI_big_data_par_Françoise_Soulié-Fogelman
 
Vision et poc EDFsur les enjeux big data
Vision et poc EDFsur les enjeux big dataVision et poc EDFsur les enjeux big data
Vision et poc EDFsur les enjeux big data
 
Slides trophee big data
Slides trophee big dataSlides trophee big data
Slides trophee big data
 
D'où vient l'idée d'OpenMeteoData ?
D'où vient l'idée d'OpenMeteoData ?D'où vient l'idée d'OpenMeteoData ?
D'où vient l'idée d'OpenMeteoData ?
 
Urban Big Data .pdf
Urban Big Data .pdfUrban Big Data .pdf
Urban Big Data .pdf
 
Protei by Cesar Harada @ ENSCI Paris 20121010
Protei by Cesar Harada @ ENSCI Paris 20121010Protei by Cesar Harada @ ENSCI Paris 20121010
Protei by Cesar Harada @ ENSCI Paris 20121010
 
20160216 - From BigData to BigProcessing
20160216 - From BigData to BigProcessing20160216 - From BigData to BigProcessing
20160216 - From BigData to BigProcessing
 
Osm 20141112-montesquieu
Osm 20141112-montesquieuOsm 20141112-montesquieu
Osm 20141112-montesquieu
 
15 03 16_data sciences pour l'actuariat_f. soulie fogelman
15 03 16_data sciences pour l'actuariat_f. soulie fogelman15 03 16_data sciences pour l'actuariat_f. soulie fogelman
15 03 16_data sciences pour l'actuariat_f. soulie fogelman
 
.NET Microframework: du code, de l’électronique, de la robotique
.NET Microframework: du code, de l’électronique, de la robotique.NET Microframework: du code, de l’électronique, de la robotique
.NET Microframework: du code, de l’électronique, de la robotique
 
Quelles stratégies de Recherche avec Cassandra ?
Quelles stratégies de Recherche avec Cassandra ?Quelles stratégies de Recherche avec Cassandra ?
Quelles stratégies de Recherche avec Cassandra ?
 
SensLab Anr Stic2010
SensLab Anr Stic2010SensLab Anr Stic2010
SensLab Anr Stic2010
 
Pérennisation et mise à disposition des données de l’Observatoire de recherch...
Pérennisation et mise à disposition des données de l’Observatoire de recherch...Pérennisation et mise à disposition des données de l’Observatoire de recherch...
Pérennisation et mise à disposition des données de l’Observatoire de recherch...
 
Présentation au GéoCamp Lyon de janvier2014
Présentation au GéoCamp Lyon de janvier2014Présentation au GéoCamp Lyon de janvier2014
Présentation au GéoCamp Lyon de janvier2014
 
Problématique du devenir des données au Centre de Calcul de l'IN2P3 - Pascal ...
Problématique du devenir des données au Centre de Calcul de l'IN2P3 - Pascal ...Problématique du devenir des données au Centre de Calcul de l'IN2P3 - Pascal ...
Problématique du devenir des données au Centre de Calcul de l'IN2P3 - Pascal ...
 
Petit-déjeuner OCTO Technology : Calculez vos indicateurs en temps réel ave...
Petit-déjeuner OCTO Technology :  Calculez vos indicateurs en temps réel ave...Petit-déjeuner OCTO Technology :  Calculez vos indicateurs en temps réel ave...
Petit-déjeuner OCTO Technology : Calculez vos indicateurs en temps réel ave...
 

Omd sotmfr

  • 1. OpenMeteoData Les données météo accessibles à tous Nicolas BALDECK SOTM-FR, 24 février 2013
  • 2. Naissance du projet ● Février 2012 : Météo pour le parapente – Besoin de paramètres très spécialisés – Evolution en 3D : Carte classique non adaptée
  • 3. Problème n°1 : Où trouver la matière première ? 10⁵ € par an, même pour un usage personnel (organisation météo europééne) Données gratuites, dans le domaine public Mais pas très fines en Europe (ex : GFS ne voit pas les Alpes...) Nécéssitent des calculs supplémentaires ● Souvent basé sur les API privées données américaines. ● Catalogue très sommaire
  • 4. Problème n° 2 : Trouver des données suffisament précises Grande majorité de Ne voit pas les vallées ! l'offre internet
  • 5. Solution Données météo Données géographiques globales locales Modèle local WRF À la maison Prévis affinées
  • 6. Problème n°3 : La puissance de calcul Prévisions vol libre à 2.5km : 3h30 de calcul pour 12h simulées Doubler la résolution fait quadrupler le temps de calcul Matériel de 2008 28 CPU 112 Go de RAM 4kW
  • 7. Solution : ● Mutualiser ! Actuel : chacun son petit modèle dans son coin RASP France Infoclimat Météo60 OpenMeteoData RASP FIVL Météociel Météorologic RASP u s! -vo Soaringmeteo. Windguru LaMMA ch z erve RASP UK Kéraunos et des S centaines d'autres... © Réutilisation Interdite
  • 8. L'expérience du Vol Libre ● Partenariat avec la FFVL ● Sites internets dédiés ex : http://meteo-parapente.com ● Réussite totale – Retours très positifs – Prévis fiables – « une révolution » Utilisation au Championnat d'Europe de Parapente, septembre dernier
  • 9. OpenMeteoData La météo, pour tous Deux axes : Supercalculateur Faciliter l'accès aux crowndfunded données des institutions pour un gros modèle publiques local
  • 10. Le modèle local ● développé par les agences gouvernementales US, ● la référence pour la recherche et l'opérationel. ● Logiciel libre.
  • 11. Le calculateur ● Technologies HPC, comme ceux du top500 ● Réseau Infiniband ● Xéon E5-2600 une dizaine de CPU actuellement merci Datacenter à Paris merci Principe : Le mieux avec les moyens qu'on a... Si vous voulez des meilleures prévis, aidez nous à développer l'infrastructure
  • 12. Projet ouvert / collaboratif Calculateur crowdfunded Super prévis • startups • développeurs • passionnés • professionnels ODbL • collectivités
  • 13. Expérience d'Open Science • Comité d'experts scientifiques météorologues, chercheurs, thésards, retraités • Collaboration avec les universités
  • 15. Données libres mais introuvables Pollution de l'air sur toute l'europe : modélisations et archives vagues / vent / courants - modèles régionaux - mesures satellites - données scientifiques - ...
  • 16. Moteur de recherche universel Filtres précis jeux de données correspondants Code pour récuperer ces données via un Infos, specs, licence.. Panier Télécharger langage de programmation la sélection Python / Java / C++ / PHP ...
  • 17. Logiciel / librairie client request = new OMD::Request(); request.area = new OMD::LatLonSquare( [44, 5], - Interface programmable [44, 10], • Python [40, 10], • C++ [40, 5] • Perl ); • PHP request.altitudes = new OMD::AltitudeRange(0, 1000, METERS, AGL); • Javascript request.run = LATEST; request.time = TOMORROW; • etc... request.parameters = ["t", "td", "wind_u", "wind_v"]; - Ligne de commande try { - Interface graphique request.download(); print(request.getJSON()); } catch (RequestException e) { print(e.type); print(e.message); }
  • 18. Bientôt les données Météo France ?
  • 20. Partenaires fabricant de matériel parapente
  • 21. Wanted ! ● Mirroirs ● Bande passante ● Matériel http://openmeteodata.org/#HardwareWanted ● Support financier ● Collaborations scientifiques et techniques ● Conférences
  • 22. + d'infos Lancement bêta en Mars ! http://openmeteodata.org nicolas.baldeck@openmeteodata.org @OpenMeteoData Aperçu des "anciennes" prévis, version parapente : SoData ! 14 Mars, IGN http://meteo-parapente.com/ Sodata.org Saint Mandé