Archives par mot-clé : OSM

Intégration des bornes de recharge de véhicules électriques dans OpenStreetMap

Un jour, j’ai voulu voir à quel point OSM était à jour concernant les bornes de recharge électrique, et ce qu’il existait comme jeu de données à disposition. C’est alors que je me suis lancé dans un recensement, puis dans la lecture du wiki concernant les bonnes pratiques à propos de l’intégration de jeux de données ouverts.

contribuer sur le site du projet du mois sur les IRVE. https://projetdumois.fr/projects/2020-03_evcharging
mettre à contribution ma fille sur le projet du mois et sur JOSM
lire plein de doc, en commençant par les guidelines d’import. https://wiki.openstreetmap.org/wiki/FR:Import/Guidelines
voir qu’Enedis se vante d’avoir raccordé 110 000 points de charge à l’été 2023, mais que l’open data n’en comporte que 44 000, soit moins de la moitié. Le Gireve est censé réunir les infos, mais rien n’est ouvert par défaut. Cet organisme n’a jamais souhaité publier de jeux de données au public. L’association OSM France en a fait la demande pour en discuter dès 2015 mais n’a jamais obtenu le moindre entretien.
fouiller les jeux de données à utiliser. trouver des tas de liens morts dans des sites de documentation sur l’open data.
causer avec les autres gens qui ont déjà poncé le sujet sur le canal matrix-telegram osm-fr.
lire la doc produite par les autres gens.
voir l’existant du boulot déjà réalisé et de la documentation à disposition concernant les bornes de recharge, la correspondance attendue entre les données ouvertes et les tags OSM. La conversion du fichier de données qui liste des points de charge et des stations de recharge par Jungle Bus / nlehuby. France/data.gouv.fr/Bornes de Recharge pour Véhicules Électriques – OpenStree…
fouiller les libs utilisées habituellement par les personnes dont la data scionnnnce est le métier. me décider à opter pour de la bidouille très lisible et commentée en nodejs àpartir de fichiers geojson.
découvrir qu’il est archi courant que les données ouvertes soient d’une piètre qualité, les témoignages de gens qui ont déjà bossé avec depuis longtemps en attestant. C’est assez incroyable à quel point les jeux de données sont produits sans cohérence (et de plein de façons pourries différentes) comparé à ce qui en est attendu, même quand la documentation et qu’un outil de validation sont mises à disposition. Il semble qu’ils soient produits par des tas de gens différents, mais visiblement pas des gens à l’aise avec l’informatique, qui font des tableaux dans des poweurpouaint et les envoient en screenshot dans un pdf. C’est assez impressionant d’amateurisme et étonnament compliqué.
espérer que ce ne sont pas les mêmes énergumènes qui sont aux commandes pour ce qui concerne les choses stratégiques à la survie des gens du pays.
trouver une procédure qui permette de n’ajouter que des informations dont on peut estimer qu’elles sont bonnes en s’inspirant des analyses faites par Osmose.

tykayn/mapping-geojson-osm: Conversion de jeux de données geojson en tags OSM…

lire des documentations sur les bonnes pratiques dans l’open data, pleine de liens morts.
trouver un moyen de mettre à jour l’existant tout en faisant de la mise en qualité, se renseigner sur la conflation. https://www.openstreetmap.org/user/Lejun/diary/400790

JOSM/Plugins/Conflation – OpenStreetMap Wiki

créer un compte dédié à l’intégration: Bender l’importateur.
faire un essai de conflation sur un seul point de recharge avec succès.
jouer avec OpenRefine et le jeu de données conseillé.
recevoir direct un commentaire qui me fait remarquer que cette contribution est pas terrible.
s’apercevoir que j’ai ajouté des tags qui n’ont rien à voir avec les tags osm, mettre encore moins d’informations dans les données à ajouter.
constater avec horreur que même les valeurs censées être booléennes ne sont pas cohérentes avec des variations dans la casse, des fois true/false, et des fois 1 ou 0.
développer des scripts pour sonder la saleté du jeu de données en rapportant des valeurs uniques par colonne, et en sortir un fichier utilisable dans l’éditeur JOSM pour comparer visuellement les données disponibles dans OSM dans deux calques différents.
aller à la pêche aux infos auprès de gens qui sont censés libérer les données mais qui font tout pour ne surtout pas remplir leurs obligations, en faire état aux autres gens qui cherchent à faire avancer les choses sur le sujet.
s’apercevoir qu’il manque près de 90 000 points de charge à la publication malgré une loi qui prévoit des sanctions à hauteur de 300€ par point de charge non publié.
avoir une procédure d’ajout de point avec un minimum d’informations valables.
faire des ajouts en comparant visuellement avec les points déjà présents dans JOSM, faire de la sélection au lasso, valider les données dans un calque « à envoyer ». Bien regarder que les nouveaux points de charge ne contiennent rien de bizarre, et zou.
faire progressivement des ajouts sur des zones de plus en plus grandes.
découvrir une option dans JOSM pour sectionner automatiquement les ajouts en plus petits envois pour faciliter le suivi des modifications par zone.
and vouala, en environ 5 jours, 11 000 points de charge ajoutés à partir du jeu de données nettoyées.
fouiller des outils libres sur le sujet des IRVE. Voir le projet clean_french_irve qui fait un suivi et nettoyage quotidien du jeu de données de data gouv.

https://github.com/BastienGauthier/clean_french_irve constater que l’open data a supprimé plein de points de charge « pour cause de dédoublonnage », le jeu de données IRVE sur data gouv comporte maintenant environ 20 000 points.

voir que plein de gens ont détecté des coordonnées de bornes inexistantes ou totalement aux fraises dans pas mal de cas.
avoir la joie de voir pas mal de contributeux s’emparer du sujet et faire croitre la quantité et qualité des données.
faire un décompte par pays des nombres de points de charge avec Overpass Turbo ou OsHome pour avoir une vue graphique de l’évolution dans le temps, voir que la France est dans les deuxième au monde dans OSM .

affaire à suivre 🙂

Si vous aimez ce que nous faisons à Cipher Bliss, vous pouvez nous soutenir de plusieurs façons: en faisant un micro don sur liberapay , ou en cryptomonnaies. Le plus simple nous pour nous faire connaître étant de partager cet article.
Suivez moi sur Mastodon @tykayn@mastodon.cipherbliss.com.
Ce site restera libre comme un gnou dans la nature et sans pubs, parce qu'on vous aime. Que la source soit avec vous!

Lancement de la Fédération des Pros d’OSM

Aujourd’hui est un grand jour pour la Fédération des pros d’OSM dont CipherBliss fait partie, nous publions officiellement le lancement de la fédé via ce communiqué de presse.
Nous existons, et nous sommes actuellement 13 entreprises mettant à disposition leur expertise pour répondre à vos besoins professionnels en matière de prestations liés au géo commun OpenStreetMap. Nous souhaitons promouvoir la souveraineté numérique et le cercle vertueux de l’écosystème d’OSM, en contribuant et en utilisant des logiciels libres au bénéfice de votre entreprise ainsi que dans nos services publics.

La fédération a pour ambition de structurer la filière en mettant en valeur les expertises, réalisations et partenariats de ses membres, en augmentant la visibilité
d’OSM auprès des utilisateurs professionnels et pourra servir d’interlocuteur pour des projets d’envergure.
Face aux problématiques de souveraineté numérique et de maîtrise des données, OSM apporte des solutions d’innovation ouverte avec un potentiel énorme pour les entreprises et collectivités.

Toutes les infos et l’annuaire des entreprises membres sont disponibles sur le site www.fposm.fr

Vous êtes déjà un professionel d’OSM? Rejoingez la fédération!

Suivez nous sur le web:

Avoir de la belle imagerie dans JOSM avec la Bd Ortho IGN et Mapillary

JOSM propose des tas d’imageries que l’on peut ajouter dans notre éditeur.
La meilleure imagerie satellite disponible actuellement (sur un maximum de lieux) est la BD Ortho de l’IGN, qui permet une vue où un pixel équivaut à 20cm réels.
Pour l’activer il faut se rendre dans le menu imagerie > préférences.
Ajouter la couche BD Ortho. Ensuite, l’activer. Et voilà, on y voit vachement bien!

Enedis, qui publie des données ouvertes, suite à un partenariat avec OSM Fr pour référencer ses poteaux électriques a promis la diffusion d’imageries aériennes de grande qualité, avec un pixel pour 5cm.

À ce jour, on dispose de quelques zones d’essai et la totalité du territoire DOM-TOM se fait attendre.

La France métropolitaine selon Enedis 😀

Vu de près, ça claque et c’est si détaillé qu’on peut effectivement situer les poteaux électriques facilement, mais aussi savoir ce qu’on peut trouver dessus, compter les tuiles des toits de maison, et peut être même savoir quelle est la marque des vélos garés au sol. Pas mal hein ?

Pour avoir des images au niveau du sol, contribuées par des millions de gens il existe les projet Mapillary (racheté par Facebook) et Kartaview (dépendant d’une entreprise de flotte de véhicules en Chine, Grav), qui visent à être remplacés par une alternative libre et au stockage distribuée: Panoramax, dont le développement est en cours.

Les projets d’imagerie au sol permettent de bénéficier de la multitude de gens capable d’y contribuer avec un simple ordiphone. C’est ainsi que pour les deux projets sus mentionnés, on a des plugins pour JOSM qui permettent de voir les traces de parcours photos et des objets détectés dans les images.

Donc si vous souhaitez publier vos photos géolocalisées, prenez soin de les copier avant de les envoyer à Mapillary, Kartaview et autres trucs du genre. Il est facile de les envoyer, mais il n’est pas garanti que vous pourrez les exporter, et qu’elles garderont une bonne définition. Sans parler des outils pour modifier massivement vos photos ou faire du tri dans les mauvaises qui sont assez peu pratiques à utiliser pour ces deux plateformes. On espère que Panoramax, qui était déjà dans les tuyaux lors du State Of The Map France à Nantes l’été dernier sera mieux doté de ce côté là.

JOSM peut aussi vous permettre de réaligner vos séquences de photos.

Pour une prise en main rapide de JOSM je vous conseille l’excellent tuto en 4 minutes de Capitaine Moustache sur le sujet:

Comme ça vous pourrez faire du livestream de vos mappages à l’aise avec uniquement des outils libres.

Comme présenté ici avec un petit accéléré de live que j’ai réalisé dans des coins paumés d’Essonne

Bon mappage!

Si vous aimez ce que nous faisons à Cipher Bliss, vous pouvez nous soutenir de plusieurs façons: en faisant un micro don sur liberapay , ou en cryptomonnaies.

Le plus simple nous pour nous faire connaître étant de partager cet article.

Suivez moi sur Mastodon
@tykayn@mastodon.cipherbliss.com.

Ce site restera libre comme un gnou dans la nature et sans pubs, parce qu'on vous aime. Que la source soit avec vous!

Rencontre OpenStreetMap en Essonne le 24 Octobre 2020

Ayant rencontré quelques gens habitués des Logiciels Libres on a fini par causer d’OpenStreetMap. Moi qui cherchais à monter un groupe local plus local que celui de Montrouge (qui est a un peu plus de 30 bornes de chez moi) j’ai trouvé assez de gens pour lancer officiellement un groupe Essonne.

Notre première rencontre se passera dans les locaux de Liness ce Samedi 24 Octobre.

Ce qui est top avec ce lieu de rencontre, 53 rue Monttessuy, à Juvisy sur Orge c’est que la salle est vraiment grande, et permet donc de se réunir à bonne distance, avec du bon équipement, à l’abri des intempéries et avec des transports en commun à proximité (plein de bus, RER C et D, ainsi que gare TGV si vous venez de super loin :D).

Ici vous avez l’Essonne, et en point en haut à droite dedans, c’est Juvisy sur Orge.

Afficher une carte plus grande

évènement sur l’agenda du libre

Groupe OSM Essone sur l’Agenda du libre

Fichier source xcf GIMP de l’affiche, que vous pouvez utiliser pour ce que vous voulez. 😉

Page du wiki OSM concernant Juvisy sur Orge

Page de l’asso OSM fr pour trouver comment rencontrer des contributeurs voisins

Si vous aimez ce que nous faisons à Cipher Bliss, vous pouvez nous soutenir de plusieurs façons: en faisant un micro don sur liberapay , ou en cryptomonnaies.

Comparaison entre OpenStreetMap et GoogleMap – GoogleKnowsNothing

à l’heure où il est crucial d’encourager du mieux que l’on peut l’utilisation de transports en commun pour réduire l’utilisation de transports polluants, ainsi qu’un tri correct des déchets pour optimiser les ressources, google maps qui fait certaines choses de façon réellement impressionnante en combinant une imagerie au sol et aérienne pour trouver des bâtiments, mange de la colle quand il s’agit de cartographier pas mal de trucs. C’est pourquoi OpentSreetMaps est un projet que j’affectionne tant: libre, éthique et participatif.

Voici donc un petit comparatif de la gare autoroutière d’à côté de chez moi, à Briis sous forges au fin fond de l’Essonne où j’ai un brin contribué au lieu de poster des bêtises (ou pas) sur des médias sociaux.

Ce qu’en voit google maps:

Cette gare voisine d’une déchèterie toute neuve est ultra utilisée, à tel point que même en été le parking est blindé et que des gens s’y garent aussi en vrac en dehors du parking. Voici ce que Google en connaît: une très bonne vue aérienne, quelques routes, mais aucune indication de la présence d’une gare, de parcs à vélos et deux roues motorisés, d’une boutique ou d’un parking. La déchetterie en question, bien que prise en photo n’a pas encore été indiquée, ne serait-ce que par un point d’intérêt. La route y menant, au sud du parking n’est même pas présente chez Google.

Et dans OpenStreetMaps, on voit bien que #googleKnowsNothing

Ici sur la carte OSM on voit bien toutes les infos, même l’emplacement des ascenseurs menant aux quais de l’abri bus autoroutier, et les accès pour personnes handicapées.

OSM présente plusieurs fonds de carte, et voici celui des transports indiquant précisément les numéros de ligne de bus qui passent par cette gare autoroutière. chose dont Gmap n’a clairement rien à péter.

Ce genre d’exemple d’informations fournies par quelques personnes dans des coins paumés montre plusieurs choses:

Gmap est au taquet surtout pour placer des commerces, dans des grandes villes, mais avec des données pas très à jour malgré de gros moyens. Il réussit cependat à disposer de nombreuses addresses et bâtiments dans des lieux où ses google cars ne se sont pas rendus, grâce à son imagerie satellite de qualité.

Cependant de nombreuses vues aériennes aux données ouvertes (IGN, openTopoMap, Maxar, MapBox, Bing…) sont aussi disponible dans OSM, ainsi que le cadastre Français.

Le projet permet aussi d’aider les cyclistes avec opencyclemap en quête d’aventure à planifier leurs trajets avec plus d’infos que Gmaps n’en a jamais eu.

En ce qui concerne Street View, les données de cartographie d’OSM sont utilisées et disponible sur les projets Mapilary et OpenStreetCam, qui sont alimentés par des prises de vue de smartphone mais aussi de caméras plus complexe. Le tout mis a dispo librement pour être réutilisé ailleurs, et pour compléter les infos de carte.

OpenStreetMap bénéficie d’une communauté de gens tellement énorme que l’on peut découvrir souvent bien plus d’informations sur ce qui nous entoure grâce à des bénévoles (mais aussi des pros) de la cartographie.

D’autres utilisateurs postent ce genre de comparatif sur mastodon avec le tag #openstreetmaps.

Seul point où OSM pêche, c’est le nombre d’adresses répertoriées. Bien que des tas d’infos soient présentes en plus de celles de Gmaps, OSM dispose de moins d’adresses car on ne peut pas les importer en masse pour des raisons de droit sur certaines bases de données. C’est pourquoi il serait bon que chacun d’entre nous puisse ajouter quelques éléments utile au projet, et je suis parfaitement convaincu que ce n’est pas plus compliqué que de poster sur un média social, ce qui est à la portée d’énormément de gens.

Allez je vous remets le comparatif Gamp – OSM.

Pourquoi pas vous?

Contribuer à un bien commun vous intéresse? Allez donc faire un tour dans des lieux que vous connaissez sur le site en .org et suivez mon guide du débutant pour essayer de voir comment modifier la carte. Vous pouvez le faire dans votre navigateur favori sans avoir à installer quoi que ce soit. Enjaillez!

Si vous aimez ce que nous faisons à Cipher Bliss, vous pouvez nous soutenir de plusieurs façons: en faisant un micro don sur liberapay , ou en cryptomonnaies.

Débuter sur openstreetmap

L’information a de la valeur. Avec la bonne information et une bonne compréhension, les individus et communautés sont plus à même d’améliorer leurs vies et mieux anticiper l’avenir.
–LearnOSM, guide du débutant pour openstreetmap

OpenStreetMap c’est trop fun, et c’est surtout un logiciel libre ainsi qu’une base de données ouverte. C’est aussi une meilleure source de vérité sourcée et vérifiée par des millions de gens – amateurs et professionels – que ne le sera jamais Google Maps et les autres services du genre qui ne permettent pas tellement de les corriger.

Petit exemple de l’ignorance de Gmaps avec le tag #googleKnowsNothing sur mastodon:

En Décembre j’ai donc décidé de me lancer dans la cartographie de lieux que je connaissais bien pour mettre ma pierre à l’édifice. La pratique recommandée consiste à ne modifier sur les cartes que les éléments que l’on est certain de connaître et à demander de l’aide aux autres dès qu’on en a besoin.

En fait, contribuer à OSM est très simple à faire sans avoir à utiliser autre chose qu’un navigateur web tel que Firefox.

Il suffit de créer un compte et d’aller dans l’éditeur de carte en ligne (qui se nomme ID), de zoomer assez près (un niveau de zoom de 18 est correct) pour afficher les détails, de faire ses modifs comme rajouter des points, des chemins, ou des polygones, puis de les enregistrer. Le principe de base c’est ça, et ça reste pas plus compliqué que ça.

Où trouver de l’aide:

Sur le wiki OSM, qui est une mine d’or ouverte tout autant à la contribution que les cartes. Il répondra à la plupart de vos questions, et en plusieurs langues. Attention, votre compte OSM n’est pas le même que celui pour le wiki, ce sont deux choses différentes.
sur le canal Telegram francophone que j’ai créé en Décembre 2018 et où je squatte,
ou le canal OpenSreetMap international anglophone qui comporte à peu près 500 personnes prêtes à s’entraider.
Trouvez de l’aide avec des gens via le forum français,
Ou encore sur d’autres endroits répertoriés dans le wiki.

Premières choses à connaître

Maintenant que vous savez où trouver de l’aide avec des vrais gens, vous pourrez sans doute cartographier des choses basiques près de chez vous. Les boutiques, les centres culturels, les maisons. Vous serez surpris de voir combien de personnes ont déjà contribué aux cartes près de chez vous, même si c’est un trou paumé comme chez moi au fin fond de l’Essonne. Et vous serez également surpris de voir comme dans des grosses villes on peut trouver des énormités dans Gmaps qui sont déjà corrigées dans OSM.

Beaucoup de commerces n’ont pas leurs horaires indiquées sur le net, c’est pourtant très pratique, surtout si vous voulez encourager le commerce local par exemple, ou animer la vie culturelle de votre quartier. Je vous conseille grandement de rentrer des heures d’ouvertures avec l’outil YoHours

C’est une page web super pratique qui permet de ne pas avoir à écrire les heures dans un format précis mais juste de sélectionner des plages horaires, pour les copier coller dans l’attribut de notre point d’intérêt.

Les décalages d’image satellite

Une chose perturbante quand on commence à faire de la cartographie est de voir comme pas mal de bâtiments sont décalés par rapport à leur image satellite. Il faut savoir que vous pouvez afficher des fonds de plan en provenance de plusieurs ressources de satellites ou de cadastre officiel, et que vous avez le droit de les décaler, ça n’affectera pas tout le monde.

Les gens éditant les cartes n’utiliseront pas forcément le même fond de plan et les mêmes décalages localement et c’est ainsi que l’on peut se retrouver à voir un groupe de maisons alignées avec l’image sattelite que l’on voit, alors que la rue d’a côté à un décalage de 5 mètres. Les fonds de plan satellites sont mis à jour régulièrement et vous serez d’ailleurs ravis d’apprendre que le méridien de greenwitch change lui aussi de place tous les ans.

Le déplacement de nombreux ensembles de points n’est pas recommandé avec l’éditeur web nommé ID, je vous recommande de ne pas vous plonger là dedans pour le moment et de faire au plus cohérent avec les éléments voisins.

Applications mobiles

Maps.me ou OSMand+ permettent de lier son compte openstreetmap (ou non) et de trouver des itinéraires hors ligne et en ligne, afficher différents fonds et éléments de cartes, des points d’intérêts, dessiner des traces GPS en marchant, à vélo ou autre, et de contribuer à OSM directement dans l’application. ce qui reste bien moins rapide que si on le fait depuis un ordinateur à écran plus grand avec une souris et un logiciel adapté comme JOSM (qui nécessite un téléchargement de logiciel en Java) ou ID (l’éditeur en page web par défaut qui apparait quand on clique sur « modifier » sur openstreetmap.org, il y en a bien sûr plein d’autres). Perso j’ai une bonne préférence pour OSMand+, choppé via f-droid au lieu du playstore.

Pour contribuer aux chemins de photos géolocalisées il existe Mapillary. Pas mal de cyclistes l’utilisent pour cartographier partout où une goueul car ne saurait aller, mais ça fonctionne aussi en voiture avec des kits de montage. On peut régler les intervalle entre images, prendre juste une image, et s’en servir pour contribuer ensuite aux plans. Mapillary propose d’ailleurs des ensembles de reconnaissances d’image pour trouver des éléments, et va automatiquement flouter les plaques d’immatriculation et les visages des gens.

Traces GPS

Vous pouvez par exemple faire un tracé de chemin ou de ruisseau en forêt en suivant une trace GPS, mais ce n’est pas seulement utile pour les endroits difficile d’accès en véhicules motorisés ou non. Sur mobile vous pouvez utiliser votre GPS et l’appli OSMand par exemple, vous allez dans les pramètres, et activez les traces GPX. une fois votre chemin terminé vous pouvez cliquer sur « enregistrer ». l’appli ne vous proposera pas d’enregistrer votre chemin si vous n’avez pas le GPS activé.

Après avoir bien compris que selon ce que l’on a sélectionné (point, chemin, ou polygone) on ne peut pas mettre n’importe quel attribut,
la plupart de mes questions ont le plus souvent concerné la recherche de nom correct pour qualifier un point d’intérêt « comment cartographier un … »

OSM vous permet de communiquer avec les autres auteurs

Il m’est arrivé de recevoir des demandes d’informations supplémentaires sur une contribution (un ensemble de plusieurs modifications) que j’aurai fait. La personne me remerciait d’avoir contribué dans une ville que je connais bien et me demandais si j’avais des infos sur telle ou telle piste cyclable de cette ville.

Cette facilité de communication est une des grandes forces d’OSM permettant une réelle qualité des données.

Aller plus loin avec JOSM

il vous suffira de télécharger le logiciel JOSM, vous connecter avec votre compte OSM, et de suivre le guide du débutant qui est très clair et concis.

Apprennez à corriger vos erreurs et celles des autres avec le validateur Osmose

La validation de vos modifications se fait automatiquement dans n’importe quel éditeur. Mais Osmose vous permet de voir sur une région donnée quelles erreurs ont été commises et pourquoi. Vous pouvez filtrer les contrôles de validation pour vous concentrer sur les erreurs plus ou moins importantes, ou sur certaines d’un genre particulier. Cela vous permettra de vous améliorer plus rapidement.

Venez donc me faire coucou sur le canal Telegram OSMfr.

Bon mappage 😉