1. Indexer la terre entière
un projet fou ?
Plus aujourd’hui !
Nicolas Colomer
OCTOTechnology
@n_colomer

2. Panorama de la carto web
OpenStreetMap

3. Cayenne, Guyane
OpenStreetMap

4. OSM en quelques chiffres
• 45 serveurs officiels
• 1M+ de contributeurs
• 2Md+ d’objets géographique
• 3.4Md+ de point GPS uploadés
• OSM data = 370Go & tiles = 1.2To

5. Data primitives
• Node = POI
• Way = liste ordonnée de [2, 2000] nodes
• Relation = liste ordonnée de nodes + ways
Open polyline : autoroute, route, chemin, …
Closed polyline : rond-point, …
Area : bâtiment, parc, lac, …

6. Meta-données + conventions
Attention : nuage (vraiment pas) exhaustive !
taginfo.openstreetmap.org

7. Exploiter les données
OSM files
XML
dumps ou diff
planet ou extract
relationel !
Outils / ETL
Osmosis
osm-history-splitter
Osmconvert
…
Stockage
PostgreSQL
PostGIS
1 2 3

8. boring installation
boring tuning
boring import
complicated search !
?

9. Peut-on faire autrement ?
Volumétrie ?
NoSQL
(geo)search ?

10. elasticsearch
• Geo PointType
– Distance Filter
– Polygon Filter
– Bounding Box Filter
– Distance Facets
• Geo ShapeType
– Query
– Filter
in 0.90.x
• within relation
• strategy impl
• index/search api
• more to come?

11. PrefixTree
grid layer #1
grid layer #2
grid layer #3
GeohashPrefixTree
1 layer = 32 rectangles
Max leve = 24
QuadPrefixTree
1 layer = 4 rectangles
Max level = 50

12. 2 projets
pour jouer avec ces données
• github.com/ncolomer/elasticsearch-osmosis-plugin
An Osmosis plugin that index OpenStreetMap data
into elasticsearch
• github.com/ncolomer/discovery
An elasticsearch plugin to visualize indexed
OpenStreetMap data

13. elasticsearch-osmosis-plugin
• Osmosis = ETL spécialisé (Java)
– Filtres géographique (Bbox) / par tags
– Import / export PostgreSQL
– Change-set / comparaison / tri
• EOP = plugin Osmosis (Java)
– Conversion du model XML en document JSON
– Construit des index spécialisés

14. MappingOSM File (XML) Equivalent JSON

15. Démo