Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.

Big Data - Accès et traitement des données d’Observation de laTerre

2,930 views

Published on

Le succès du programme Copernicus piloté par l’Union Européenne en coordination avec l’ESA et les Etats membres repose sur l’appui du programme aux politiques publiques européennes et sa capacité à favoriser l’innovation par le développement des services à valeur ajoutée en Europe. Une politique de données « libre et gratuite » a été promue dans cette optique avec comme conditions essentielles, d'une part la facilité d'accès aux données par les utilisateurs publics et privés, et, d'autre part, la mise en place d'un plan d’action pour stimuler le secteur aval.

A cet effet, le CNES en tant que « segment sol collaboratif » complète au travers du projet PEPS l’accès large aux produits des satellites Sentinels. Avec 4 To de données supplémentaires chaque jour pour un volume de 20 Po de données à l'horizon 2020, l'enjeu de PEPS est de garantir un accès performant aux données en proposant notamment des capacités de traitement colocalisées et ainsi favoriser l'adoption et l'utilisation des données d'Observation de la Terre

Published in: Technology
  • Login to see the comments

Big Data - Accès et traitement des données d’Observation de laTerre

  1. 1. Big DataAccès et traitement des données d’Observation de laTerre Jérôme GASPERI Rencontres Décryptageo 2015 - Saint-Mandé, France - 09 Juin 2015
  2. 2. BIG
  3. 3. V
  4. 4. V Volume
  5. 5. V Volume Variété
  6. 6. V Volume Variété Vitesse
  7. 7. V Volume Variété Vitesse €Valeur
  8. 8. Volume
  9. 9. L’ère du pétaoctet
  10. 10. 1
PETAOCTET 13.3 ANNEES DE VIDEO HD
  11. 11. 1
PETAOCTET 13.3 ANNEES DE VIDEO HD 1.5PETAOCTET TAILLE DES 10 MILLIARDS DE PHOTOS SUR FACEBOOK
  12. 12. 1
PETAOCTET 13.3 ANNEES DE VIDEO HD 1.5PETAOCTET TAILLE DES 10 MILLIARDS DE PHOTOS SUR FACEBOOK 20PETAOCTETS LA PRODUCTION MONDIALE DE DISQUES DURS EN 1995
  13. 13. 1
PETAOCTET 13.3 ANNEES DE VIDEO HD 1.5PETAOCTET TAILLE DES 10 MILLIARDS DE PHOTOS SUR FACEBOOK 20PETAOCTETS LA PRODUCTION MONDIALE DE DISQUES DURS EN 1995 50PETAOCTETS L’INTEGRALITE DE TOUTE LA PRODUCTION ECRITE DE L’HUMANITE DEPUIS L’INVENTION DE L’ECRITURE DANS TOUTES LES LANGUES
  14. 14. 1petaoctet=200000DVDs
  15. 15. Variété Vitesse
  16. 16. €Valeur
  17. 17. Brett Ryder - http://www.economist.com/node/15579717 Extraire l’information
  18. 18. 1 milliard de milliard d’opér at ions par seconde e n 20 24 1 exaflops
  19. 19. Big Data...Big Problem ?
  20. 20. vs
  21. 21. vs ~ 30W
  22. 22. vs ~ 30W 1x
  23. 23. vs ~ 30W ~ 30MW 1x
  24. 24. vs ~ 30W ~ 30MW 1x 3x
  25. 25. Your Online World: Green IRL, or #dirty? Amazon Web Services Digital Realty Dupont Fabros Ebay Google Facebook Oracle HP Yahoo IBM Microsoft Apple Salesforce Rackspace Equinix Telecity http://www.greenpeace.org/usa/clickclean/#report
  26. 26. Big Data...from space
  27. 27. Sentinel-1 RADAR S1A - April 2014 S1B mid 2015 Sentinel-2 OPTICAL S2A - June 2015 S2B mid 2016 Sentinel-3 ALTIMETER / SEA SURFACE S3A - Summer 2015 S3B mid 2016 Sentinel-4 ATMOSPHERE 2018 Sentinel-5P ATMOSPHERE End 2015Sentinel-5 ATMOSPHERE 2020 Sentinel-6 ? Le programme Sentinel
  28. 28. Sentinel 2
  29. 29. Sentinel 2Une « photo » d’une résolution de 10 mètres de toutes les terres émergées…tous les 5 jours
  30. 30. Des millions d’images ?
  31. 31. Sven Sachsalber | http://www.palaisdetokyo.com/fr/events/sven-sachsalber
  32. 32. Sven Sachsalber | http://www.palaisdetokyo.com/fr/events/sven-sachsalber 17 hours 45 minutes
  33. 33. Quand
  34. 34. Quand Où
  35. 35. Quand Où Comment
  36. 36. Contenu de l’image ? Quoi
  37. 37. Etiquettage automatique des produits d’Observation de la Terre iTag github.com/jjrom/itag
  38. 38. Image orthorectifiée
  39. 39. Image orthorectifiée Ce que l’on a
  40. 40. Image orthorectifiée Image classifiée Ce que l’on a
  41. 41. Image orthorectifiée Image classifiée C’est du bâti C’est de l’eau C’est de la forêt Ce que l’on a
  42. 42. Image orthorectifiée Image classifiée C’est du bâti C’est de l’eau C’est de la forêt Ce que l’on a Ce que l’on veut
  43. 43. Emprise de l’image
  44. 44. Emprise de l’image Bords de côtes Toponymes (Continents, Pays, Régions, Etats) Densité de population Occupation du sol …etc… Couches d’informations
  45. 45. Emprise de l’image Bords de côtes Toponymes (Continents, Pays, Régions, Etats) Densité de population Occupation du sol …etc… Couches d’informations […etc…] { "name":"Europe", "id":"continent:europe", "countries":[ { "name":"Italy", "id":"country:italy", "pcover":37.02, "regions":[ { "name":"Valle d'Aosta", "id":"region:valle-d-aosta", "states":[ { "name":"Aoste", "id":"state:aoste", "pcover":37.02, "toponyms":[] } ] } ] }, […etc…]
  46. 46. Occupation du sol Mots clés descriptifs Localisation « toponymique »
  47. 47. restoVers un moteur de recherche pour l’Observation de la Terre github.com/jjrom/resto
  48. 48. Coastal
  49. 49. Coastal town
  50. 50. California Coastal town
  51. 51. California Coastal town spring
  52. 52. California Coastal town spring without clouds
  53. 53. PEPSPlateforme d’Exploitation des Produits Sentinels Chercher Visualiser Télécharger Exploiter
  54. 54. https://vimeo.com/122638288
  55. 55. 2020 17 POVolume stocké dans le data center du CNES à Toulouse pour le projet PEPS
  56. 56. 2020 17 POVolume stocké dans le data center du CNES à Toulouse pour le projet PEPS DVDs
  57. 57. Amener le traitement au plus près des données
  58. 58. HPC 50 Teraflops
  59. 59. Applications https://www.theia-land.fr
  60. 60. Agriculture
  61. 61. Biomasse
  62. 62. Surface enneigée
  63. 63. Occupation du sol

×