Big DataAccès et traitement des données d’Observation de laTerre
Jérôme GASPERI Rencontres Décryptageo 2015 - Saint-Mandé,...
BIG
V
V
Volume
V
Volume Variété
V
Volume Variété
Vitesse
V
Volume Variété
Vitesse
€Valeur
Volume
L’ère du pétaoctet
1
PETAOCTET
13.3 ANNEES DE VIDEO HD
1
PETAOCTET
13.3 ANNEES DE VIDEO HD
1.5PETAOCTET
TAILLE DES 10 MILLIARDS DE PHOTOS SUR FACEBOOK
1
PETAOCTET
13.3 ANNEES DE VIDEO HD
1.5PETAOCTET
TAILLE DES 10 MILLIARDS DE PHOTOS SUR FACEBOOK
20PETAOCTETS
LA PRODUCTION...
1
PETAOCTET
13.3 ANNEES DE VIDEO HD
1.5PETAOCTET
TAILLE DES 10 MILLIARDS DE PHOTOS SUR FACEBOOK
20PETAOCTETS
LA PRODUCTION...
1petaoctet=200000DVDs
Variété
Vitesse
€Valeur
Brett Ryder - http://www.economist.com/node/15579717
Extraire l’information
1 milliard de milliard d’opér at ions par seconde e n 20 24
1 exaflops
Big Data...Big Problem ?
vs
vs
~ 30W
vs
~ 30W
1x
vs
~ 30W ~ 30MW
1x
vs
~ 30W ~ 30MW
1x 3x
Your Online World:
Green IRL, or #dirty?
Amazon
Web
Services
Digital
Realty
Dupont
Fabros
Ebay
Google
Facebook
Oracle
HP
Y...
Big Data...from space
Sentinel-1
RADAR
S1A - April 2014
S1B mid 2015
Sentinel-2
OPTICAL
S2A - June 2015
S2B mid 2016
Sentinel-3
ALTIMETER / SEA ...
Sentinel 2
Sentinel 2Une « photo » d’une résolution de 10 mètres de toutes les terres émergées…tous les 5 jours
Des millions d’images ?
Sven Sachsalber | http://www.palaisdetokyo.com/fr/events/sven-sachsalber
Sven Sachsalber | http://www.palaisdetokyo.com/fr/events/sven-sachsalber
17 hours 45 minutes
Quand
Quand Où
Quand Où Comment
Contenu de l’image ?
Quoi
Etiquettage automatique des produits d’Observation de la Terre
iTag
github.com/jjrom/itag
Image orthorectifiée
Image orthorectifiée
Ce que l’on a
Image orthorectifiée Image classifiée
Ce que l’on a
Image orthorectifiée Image classifiée
C’est du bâti
C’est de l’eau
C’est de la forêt
Ce que l’on a
Image orthorectifiée Image classifiée
C’est du bâti
C’est de l’eau
C’est de la forêt
Ce que l’on a Ce que l’on veut
Emprise de l’image
Emprise de l’image
Bords de côtes
Toponymes
(Continents, Pays, Régions, Etats)
Densité de population
Occupation du sol
…et...
Emprise de l’image
Bords de côtes
Toponymes
(Continents, Pays, Régions, Etats)
Densité de population
Occupation du sol
…et...
Occupation du sol
Mots clés descriptifs
Localisation
« toponymique »
restoVers un moteur de recherche pour l’Observation de la Terre
github.com/jjrom/resto
Coastal
Coastal
town
California
Coastal
town
California
Coastal
town
spring
California
Coastal
town
spring
without clouds
PEPSPlateforme d’Exploitation des Produits Sentinels
Chercher
Visualiser
Télécharger
Exploiter
https://vimeo.com/122638288
2020
17 POVolume stocké dans le data center du CNES à Toulouse pour le projet PEPS
2020
17 POVolume stocké dans le data center du CNES à Toulouse pour le projet PEPS
DVDs
Amener le traitement au
plus près des données
HPC 50 Teraflops
Applications
https://www.theia-land.fr
Agriculture
Biomasse
Surface enneigée
Occupation du sol
Big Data - Accès et traitement des données d’Observation de laTerre
Big Data - Accès et traitement des données d’Observation de laTerre
Big Data - Accès et traitement des données d’Observation de laTerre
Big Data - Accès et traitement des données d’Observation de laTerre
Big Data - Accès et traitement des données d’Observation de laTerre
Big Data - Accès et traitement des données d’Observation de laTerre
Big Data - Accès et traitement des données d’Observation de laTerre
Big Data - Accès et traitement des données d’Observation de laTerre
Prochain SlideShare
Chargement dans…5
×

Big Data - Accès et traitement des données d’Observation de laTerre

2 464 vues

Publié le

Le succès du programme Copernicus piloté par l’Union Européenne en coordination avec l’ESA et les Etats membres repose sur l’appui du programme aux politiques publiques européennes et sa capacité à favoriser l’innovation par le développement des services à valeur ajoutée en Europe. Une politique de données « libre et gratuite » a été promue dans cette optique avec comme conditions essentielles, d'une part la facilité d'accès aux données par les utilisateurs publics et privés, et, d'autre part, la mise en place d'un plan d’action pour stimuler le secteur aval.

A cet effet, le CNES en tant que « segment sol collaboratif » complète au travers du projet PEPS l’accès large aux produits des satellites Sentinels. Avec 4 To de données supplémentaires chaque jour pour un volume de 20 Po de données à l'horizon 2020, l'enjeu de PEPS est de garantir un accès performant aux données en proposant notamment des capacités de traitement colocalisées et ainsi favoriser l'adoption et l'utilisation des données d'Observation de la Terre

Publié dans : Technologie
0 commentaire
1 j’aime
Statistiques
Remarques
  • Soyez le premier à commenter

Aucun téléchargement
Vues
Nombre de vues
2 464
Sur SlideShare
0
Issues des intégrations
0
Intégrations
1 051
Actions
Partages
0
Téléchargements
36
Commentaires
0
J’aime
1
Intégrations 0
Aucune incorporation

Aucune remarque pour cette diapositive

Big Data - Accès et traitement des données d’Observation de laTerre

  1. 1. Big DataAccès et traitement des données d’Observation de laTerre Jérôme GASPERI Rencontres Décryptageo 2015 - Saint-Mandé, France - 09 Juin 2015
  2. 2. BIG
  3. 3. V
  4. 4. V Volume
  5. 5. V Volume Variété
  6. 6. V Volume Variété Vitesse
  7. 7. V Volume Variété Vitesse €Valeur
  8. 8. Volume
  9. 9. L’ère du pétaoctet
  10. 10. 1
PETAOCTET 13.3 ANNEES DE VIDEO HD
  11. 11. 1
PETAOCTET 13.3 ANNEES DE VIDEO HD 1.5PETAOCTET TAILLE DES 10 MILLIARDS DE PHOTOS SUR FACEBOOK
  12. 12. 1
PETAOCTET 13.3 ANNEES DE VIDEO HD 1.5PETAOCTET TAILLE DES 10 MILLIARDS DE PHOTOS SUR FACEBOOK 20PETAOCTETS LA PRODUCTION MONDIALE DE DISQUES DURS EN 1995
  13. 13. 1
PETAOCTET 13.3 ANNEES DE VIDEO HD 1.5PETAOCTET TAILLE DES 10 MILLIARDS DE PHOTOS SUR FACEBOOK 20PETAOCTETS LA PRODUCTION MONDIALE DE DISQUES DURS EN 1995 50PETAOCTETS L’INTEGRALITE DE TOUTE LA PRODUCTION ECRITE DE L’HUMANITE DEPUIS L’INVENTION DE L’ECRITURE DANS TOUTES LES LANGUES
  14. 14. 1petaoctet=200000DVDs
  15. 15. Variété Vitesse
  16. 16. €Valeur
  17. 17. Brett Ryder - http://www.economist.com/node/15579717 Extraire l’information
  18. 18. 1 milliard de milliard d’opér at ions par seconde e n 20 24 1 exaflops
  19. 19. Big Data...Big Problem ?
  20. 20. vs
  21. 21. vs ~ 30W
  22. 22. vs ~ 30W 1x
  23. 23. vs ~ 30W ~ 30MW 1x
  24. 24. vs ~ 30W ~ 30MW 1x 3x
  25. 25. Your Online World: Green IRL, or #dirty? Amazon Web Services Digital Realty Dupont Fabros Ebay Google Facebook Oracle HP Yahoo IBM Microsoft Apple Salesforce Rackspace Equinix Telecity http://www.greenpeace.org/usa/clickclean/#report
  26. 26. Big Data...from space
  27. 27. Sentinel-1 RADAR S1A - April 2014 S1B mid 2015 Sentinel-2 OPTICAL S2A - June 2015 S2B mid 2016 Sentinel-3 ALTIMETER / SEA SURFACE S3A - Summer 2015 S3B mid 2016 Sentinel-4 ATMOSPHERE 2018 Sentinel-5P ATMOSPHERE End 2015Sentinel-5 ATMOSPHERE 2020 Sentinel-6 ? Le programme Sentinel
  28. 28. Sentinel 2
  29. 29. Sentinel 2Une « photo » d’une résolution de 10 mètres de toutes les terres émergées…tous les 5 jours
  30. 30. Des millions d’images ?
  31. 31. Sven Sachsalber | http://www.palaisdetokyo.com/fr/events/sven-sachsalber
  32. 32. Sven Sachsalber | http://www.palaisdetokyo.com/fr/events/sven-sachsalber 17 hours 45 minutes
  33. 33. Quand
  34. 34. Quand Où
  35. 35. Quand Où Comment
  36. 36. Contenu de l’image ? Quoi
  37. 37. Etiquettage automatique des produits d’Observation de la Terre iTag github.com/jjrom/itag
  38. 38. Image orthorectifiée
  39. 39. Image orthorectifiée Ce que l’on a
  40. 40. Image orthorectifiée Image classifiée Ce que l’on a
  41. 41. Image orthorectifiée Image classifiée C’est du bâti C’est de l’eau C’est de la forêt Ce que l’on a
  42. 42. Image orthorectifiée Image classifiée C’est du bâti C’est de l’eau C’est de la forêt Ce que l’on a Ce que l’on veut
  43. 43. Emprise de l’image
  44. 44. Emprise de l’image Bords de côtes Toponymes (Continents, Pays, Régions, Etats) Densité de population Occupation du sol …etc… Couches d’informations
  45. 45. Emprise de l’image Bords de côtes Toponymes (Continents, Pays, Régions, Etats) Densité de population Occupation du sol …etc… Couches d’informations […etc…] { "name":"Europe", "id":"continent:europe", "countries":[ { "name":"Italy", "id":"country:italy", "pcover":37.02, "regions":[ { "name":"Valle d'Aosta", "id":"region:valle-d-aosta", "states":[ { "name":"Aoste", "id":"state:aoste", "pcover":37.02, "toponyms":[] } ] } ] }, […etc…]
  46. 46. Occupation du sol Mots clés descriptifs Localisation « toponymique »
  47. 47. restoVers un moteur de recherche pour l’Observation de la Terre github.com/jjrom/resto
  48. 48. Coastal
  49. 49. Coastal town
  50. 50. California Coastal town
  51. 51. California Coastal town spring
  52. 52. California Coastal town spring without clouds
  53. 53. PEPSPlateforme d’Exploitation des Produits Sentinels Chercher Visualiser Télécharger Exploiter
  54. 54. https://vimeo.com/122638288
  55. 55. 2020 17 POVolume stocké dans le data center du CNES à Toulouse pour le projet PEPS
  56. 56. 2020 17 POVolume stocké dans le data center du CNES à Toulouse pour le projet PEPS DVDs
  57. 57. Amener le traitement au plus près des données
  58. 58. HPC 50 Teraflops
  59. 59. Applications https://www.theia-land.fr
  60. 60. Agriculture
  61. 61. Biomasse
  62. 62. Surface enneigée
  63. 63. Occupation du sol

×