[OSM-talk-fr] Suppression des « gribouillis » GPS

2017-11-22 Thread Sébastien Dinot
Bonsoir,

J'ai pour habitude de nettoyer manuellement mes traces GPS via Viking
avant de les pousser sur OSM et de n'en conserver que la partie utile
mais certains contributeurs ne prennent pas cette peine et je tombe trop
fréquemment sur des « gribouillis » tels que ceux-ci :

  * https://www.palabritudes.net/~zebulon/nuage_gps_1.png

  * https://www.palabritudes.net/~zebulon/nuage_gps_2.png

  * https://www.palabritudes.net/~zebulon/nuage_gps_3.png

Comme j'ai du mal à comprendre pourquoi ces contributeurs jugent utile
de pousser de telles traces, je me dis que soit ils n'ont pas conscience
du problème, soit ils ne savent pas comment le traiter, soit ils ont la
flemme de s'attaquer manuellement à cette tâche fastidieuse.

Du coup, je me pose deux questions :

  * N'est-il pas possible de les supprimer ?

  * Connaissez-vous des outils libres qui permettraient d'automatiser ce
nettoyage (sur GNU/Linux en ce qui me concerne) et dont nous
pourrions faire la promotion ?

Sébastien


-- 
Sébastien Dinot, sebastien.di...@free.fr
http://sebastien.dinot.free.fr/
Ne goûtez pas au logiciel libre, vous ne pourriez plus vous en passer !

___
Talk-fr mailing list
Talk-fr@openstreetmap.org
https://lists.openstreetmap.org/listinfo/talk-fr


Re: [OSM-talk-fr] Suppression des « gribouillis » GPS

2017-11-22 Thread Vincent Privat
Les supprimer, je ne sais pas, mais tu peux au moins configurer JOSM pour
utiliser un rendu GPS plus adapté à la situation.
Le dernier ajout qu'on a fait sur le sujet concerne le mode "heatmap", tu
as testé pour voir ce que ça donne ?
Exemples de rendu dans les commentaires des 2 tickets suivants:
https://josm.openstreetmap.de/ticket/13124
https://josm.openstreetmap.de/ticket/14343

A+
Vincent


Le 23 novembre 2017 à 00:48, Sébastien Dinot  a
écrit :

> Bonsoir,
>
> J'ai pour habitude de nettoyer manuellement mes traces GPS via Viking
> avant de les pousser sur OSM et de n'en conserver que la partie utile
> mais certains contributeurs ne prennent pas cette peine et je tombe trop
> fréquemment sur des « gribouillis » tels que ceux-ci :
>
>   * https://www.palabritudes.net/~zebulon/nuage_gps_1.png
>
>   * https://www.palabritudes.net/~zebulon/nuage_gps_2.png
>
>   * https://www.palabritudes.net/~zebulon/nuage_gps_3.png
>
> Comme j'ai du mal à comprendre pourquoi ces contributeurs jugent utile
> de pousser de telles traces, je me dis que soit ils n'ont pas conscience
> du problème, soit ils ne savent pas comment le traiter, soit ils ont la
> flemme de s'attaquer manuellement à cette tâche fastidieuse.
>
> Du coup, je me pose deux questions :
>
>   * N'est-il pas possible de les supprimer ?
>
>   * Connaissez-vous des outils libres qui permettraient d'automatiser ce
> nettoyage (sur GNU/Linux en ce qui me concerne) et dont nous
> pourrions faire la promotion ?
>
> Sébastien
>
>
> --
> Sébastien Dinot, sebastien.di...@free.fr
> http://sebastien.dinot.free.fr/
> Ne goûtez pas au logiciel libre, vous ne pourriez plus vous en passer !
>
> ___
> Talk-fr mailing list
> Talk-fr@openstreetmap.org
> https://lists.openstreetmap.org/listinfo/talk-fr
>
___
Talk-fr mailing list
Talk-fr@openstreetmap.org
https://lists.openstreetmap.org/listinfo/talk-fr


Re: [OSM-talk-fr] Suppression des « gribouillis » GPS

2017-11-22 Thread Jean-Claude Repetto

Le 23/11/2017 à 00:55, Vincent Privat a écrit :



   * Connaissez-vous des outils libres qui permettraient
d'automatiser ce
     nettoyage (sur GNU/Linux en ce qui me concerne) et dont nous
     pourrions faire la promotion ?

Sébastien


Bonjour,

Cet outil n'est pas libre:
http://www.gpsvisualizer.com/tutorials/track_filters.html

mais l'algorithme de nettoyage est expliqué, on doit donc pouvoir le 
recoder assez facilement.


Jean-Claude

___
Talk-fr mailing list
Talk-fr@openstreetmap.org
https://lists.openstreetmap.org/listinfo/talk-fr


Re: [OSM-talk-fr] Suppression des « gribouillis » GPS

2017-11-23 Thread Sébastien Dinot
Bonjour Vincent,

- Mail original -
> Le dernier ajout qu'on a fait sur le sujet concerne le mode
> "heatmap", tu as testé pour voir ce que ça donne ?

Je ne connaissais pas l'existence de ce mode (il est intéressant, merci pour 
l'info), mais dans le cas présent, dire qu'il n'arrange rien est un euphémisme. 
Tu peux le vérifier par toi-même en chargeant la zone que j'ai pointée à 
Grenade :

http://osm.org/go/xVSt9N7EX?m=

Ce mode me semble plus fait pour aider les contributeur à trouver le meilleur 
chemin lorsque une multitude de traces existent. Cf. le test que je viens de 
faire au sud-est de Toulouse :

  * https://www.palabritudes.net/~zebulon/trace-gps-normal.png

  * https://www.palabritudes.net/~zebulon/trace-gps-heatmap.png

Sébastien

-- 
Sébastien Dinot, sebastien.di...@free.fr
http://sebastien.dinot.free.fr/
Ne goûtez pas au logiciel libre, vous ne pourriez plus vous en passer !


___
Talk-fr mailing list
Talk-fr@openstreetmap.org
https://lists.openstreetmap.org/listinfo/talk-fr


Re: [OSM-talk-fr] Suppression des « gribouillis » GPS

2017-11-23 Thread thevenon . julien


- Mail original -
De: "Sébastien Dinot" 
À: "Liste OSM Fr" 
Envoyé: Jeudi 23 Novembre 2017 00:48:02
Objet: [OSM-talk-fr] Suppression des « gribouillis » GPS

> Bonsoir,

> J'ai pour habitude de nettoyer manuellement mes traces GPS via Viking
> avant de les pousser sur OSM et de n'en conserver que la partie utile
> [..]
>  * Connaissez-vous des outils libres qui permettraient d'automatiser ce
>nettoyage (sur GNU/Linux en ce qui me concerne) et dont nous
>pourrions faire la promotion ?

Bonjour Sebastien,

Tu as regarde du cote du logiciel GPSBabel ?
Il a des filtres pour retravailler les traces GPS, il est libre et 
multi-plateforme:
https://www.gpsbabel.org/htmldoc-development/Data_Filters.html
http://wiki.openstreetmap.org/wiki/GPSBabel/Using_filters

Julien

___
Talk-fr mailing list
Talk-fr@openstreetmap.org
https://lists.openstreetmap.org/listinfo/talk-fr


Re: [OSM-talk-fr] Suppression des « gribouillis » GPS

2017-11-23 Thread Sébastien Dinot
Bonjour Julien,

- Mail original -
> Tu as regarde du cote du logiciel GPSBabel ?

Non, je n'y avais pas pensé. La seule fois où j'ai utilisé GPSBabel, c'était 
pour convertir le format d'une trace. Mais je sais que certains utilisent cet 
outil pour lisser les courbes et redistribuer les points.

> Il a des filtres pour retravailler les traces GPS, il est libre et
> multi-plateforme:
> https://www.gpsbabel.org/htmldoc-development/Data_Filters.html

De prime abord, le filtre supprimant les points trop proches les uns des autres 
semble intéressant, mais je crains qu'il ne soit d'aucune utilité dans la 
plupart des cas que je rencontre. En effet, ce filtre doit pouvoir nettoyer les 
« nuages » qui se forment lorsqu'on fait une pause lors d'une randonnée (la 
réception est bonne et les points sont alors très proches les uns des autres) 
mais pas lorsqu'un GPS reste allumé dans un bâtiment (la réception étant très 
mauvaise, les points peuvent être très éloignés les uns des autres). Même 
lorsqu'il est pertinent, ce filtre risque par contre d'avoir des effets de bord 
à d'autres endroits de la trace.

Cela mérite quelques essais que je ferai dans les jours qui viennent. S'il peut 
éviter quelques bêtises, c'est bon à savoir et à faire savoir (en ce qui me 
concerne, Viking me convient car je maitrise totalement ce que j'élimine ou je 
laisse).

Merci.

Sébastien

-- 
Sébastien Dinot, sebastien.di...@free.fr
http://sebastien.dinot.free.fr/
Ne goûtez pas au logiciel libre, vous ne pourriez plus vous en passer !


___
Talk-fr mailing list
Talk-fr@openstreetmap.org
https://lists.openstreetmap.org/listinfo/talk-fr


Re: [OSM-talk-fr] Suppression des « gribouillis » GPS

2017-11-23 Thread Nicolas Moyroud

Bonjour,

Une appli sympa pour nettoyer les traces GPS : 
https://wiki.openstreetmap.org/wiki/GpsPrune


On peut découper une portion et la supprimer de la trace.

Nicolas

Le 23/11/2017 à 10:39, Sébastien Dinot a écrit :
Cela mérite quelques essais que je ferai dans les jours qui viennent. 
S'il peut éviter quelques bêtises, c'est bon à savoir et à faire 
savoir (en ce qui me concerne, Viking me convient car je maitrise 
totalement ce que j'élimine ou je laisse). 


___
Talk-fr mailing list
Talk-fr@openstreetmap.org
https://lists.openstreetmap.org/listinfo/talk-fr


Re: [OSM-talk-fr] Suppression des « gribouillis » GPS

2017-11-23 Thread Jean-Claude Repetto
Le 23/11/2017 à 11:18, Nicolas Moyroud a écrit :
> Bonjour,
> 
> Une appli sympa pour nettoyer les traces GPS :
> https://wiki.openstreetmap.org/wiki/GpsPrune
> 
> On peut découper une portion et la supprimer de la trace.
> 
> Nicolas
> 

Oui, mais Sébastien demandait un outil de nettoyage automatique.

___
Talk-fr mailing list
Talk-fr@openstreetmap.org
https://lists.openstreetmap.org/listinfo/talk-fr


Re: [OSM-talk-fr] Suppression des « gribouillis » GPS

2017-11-23 Thread Philippe Verdy
Je pense que tout automatisme induit sa part d'approximation dans les
simplifications effectuées. Mais la plupart de ceux exposés ici se
contentent juste de simplifier une trace unique sans tenter de faire une
moyenne entre plusieurs traces. Un meilleur outil devrait tenter de
commencer par dresser une "heat map" à partir d'une liste de traces, pour
relever les points d'intersections les plus proches, et ensuite de les lier
sans reprendre des points d'une trace individuelle.

Au final il vaut mieux encore charger toutes les traces GPS dans une zone
et faire une estimation visuelle, mais dans le cas de la France, où
l'imagerie est excellente, on a encore de meilleurs résultats en traçant
sur l'imagerie qui semble la mieux correspondre aux traces GPS.

Noter cependant que les traces devraient être datées: des parcours anciens
ne sont pas toujours disponibles, et certaines traces peuvent faire
apparaitre des passages interdits nécessitant des contours, qu'une
simplification hasardeuse ou même l'observation d'une imagerie un peu
ancienne pourrait faire passer comme un chemin ouvert. Aussi, charger
toutes les traces n'est pas si utile si on ne dispose pas d'un filtre
ajustable avec un intervalle de date (deux curseurs) permettant d'observer
un changement récent (qui n'aurait pas encore beaucoup de traces, alors que
la majorité des anciennes traces effectue un parcours maintenant
impossible, sans compter que certains parcours ont pu prendre par mégarde
des passages interdits, ou avoir été faits en fait à pied ou à vélo, mais
par un chemin interdit aux véhicules).

Les traces GPS ne sont que des indicateurs de cohérence, ou peuvent servir
à détecter des changements récents (en utilisant leurs dates alors que
l'imagerie est souvent ambiguë sur les dates effectives des clichés, quand
Bing ou d'autres ne mentionnent que ses dates de mise à jour de leur
publication sur des secteurs étendus faits d'assemblages de clichés à des
tas de dates différentes): une grosse différence sera l'occasion d'aller
voir sur place ce qu'il en est réellement.

Mais elles ne sont pas l'outil idéal pour tracer (sauf dans le cas des
zones initialement non couvertes par la carto OSM: c'est mieux que rien,
mais en fait rarement aussi précis qu'une imagerie même en résolution
faible, elles sont surtout utiles en milieu forestier pour les sentiers
pédestres ou pour VTT, ou en montagne quand les traces au sol sont
difficilement observables entre roches et basse végétation).

Le 23 novembre 2017 à 11:54, Jean-Claude Repetto  a écrit
:

> Le 23/11/2017 à 11:18, Nicolas Moyroud a écrit :
> > Bonjour,
> >
> > Une appli sympa pour nettoyer les traces GPS :
> > https://wiki.openstreetmap.org/wiki/GpsPrune
> >
> > On peut découper une portion et la supprimer de la trace.
> >
> > Nicolas
> >
>
> Oui, mais Sébastien demandait un outil de nettoyage automatique.
>
> ___
> Talk-fr mailing list
> Talk-fr@openstreetmap.org
> https://lists.openstreetmap.org/listinfo/talk-fr
>
___
Talk-fr mailing list
Talk-fr@openstreetmap.org
https://lists.openstreetmap.org/listinfo/talk-fr


Re: [OSM-talk-fr] Suppression des « gribouillis » GPS

2017-11-23 Thread Julien Lepiller

Le 2017-11-23 14:09, Philippe Verdy a écrit :

[...]

Noter cependant que les traces devraient être datées: des parcours 
anciens

ne sont pas toujours disponibles, et certaines traces peuvent faire
apparaitre des passages interdits nécessitant des contours, qu'une
simplification hasardeuse ou même l'observation d'une imagerie un peu
ancienne pourrait faire passer comme un chemin ouvert. Aussi, charger
toutes les traces n'est pas si utile si on ne dispose pas d'un filtre
ajustable avec un intervalle de date (deux curseurs) permettant 
d'observer
un changement récent (qui n'aurait pas encore beaucoup de traces, alors 
que

la majorité des anciennes traces effectue un parcours maintenant
impossible, sans compter que certains parcours ont pu prendre par 
mégarde
des passages interdits, ou avoir été faits en fait à pied ou à vélo, 
mais

par un chemin interdit aux véhicules).


Pour rebondir là-dessus, il m'est une fois arrivé de tomber sur un 
endroit
qui avait l'air bien cartographié, mais pour lequel j'avais deux ou 
trois
imageries qui ne concordaient pas. En chargeant les tracés GPS, j'ai 
trouvé

plein de traces, et au moins une concordant avec chaque imagerie, ce qui
fait que je n'ai pas su si ce qui était cartographié était le résultat 
des

travaux ou l'ancienne route...

Y a-t-il moyen de connaître la date d'une trace GPS ou de l'imagerie 
dans
JOSM ? Quand j'essaye d'obtenir les métadonnées de l'imagerie j'ai 
uniquement

la date limite du cache, pas celle de la prise de vue.



Les traces GPS ne sont que des indicateurs de cohérence, ou peuvent 
servir

à détecter des changements récents (en utilisant leurs dates alors que
l'imagerie est souvent ambiguë sur les dates effectives des clichés, 
quand

Bing ou d'autres ne mentionnent que ses dates de mise à jour de leur
publication sur des secteurs étendus faits d'assemblages de clichés à 
des
tas de dates différentes): une grosse différence sera l'occasion 
d'aller

voir sur place ce qu'il en est réellement.

[...]


___
Talk-fr mailing list
Talk-fr@openstreetmap.org
https://lists.openstreetmap.org/listinfo/talk-fr


Re: [OSM-talk-fr] Suppression des « gribouillis » GPS

2017-11-23 Thread Philippe Verdy
Le 23 novembre 2017 à 15:21, Julien Lepiller  a écrit :

> Le 2017-11-23 14:09, Philippe Verdy a écrit :
>
>> [...]
>>
>> Noter cependant que les traces devraient être datées: des parcours anciens
>> ne sont pas toujours disponibles, et certaines traces peuvent faire
>> apparaitre des passages interdits nécessitant des contours, qu'une
>> simplification hasardeuse ou même l'observation d'une imagerie un peu
>> ancienne pourrait faire passer comme un chemin ouvert. Aussi, charger
>> toutes les traces n'est pas si utile si on ne dispose pas d'un filtre
>> ajustable avec un intervalle de date (deux curseurs) permettant d'observer
>> un changement récent (qui n'aurait pas encore beaucoup de traces, alors
>> que
>> la majorité des anciennes traces effectue un parcours maintenant
>> impossible, sans compter que certains parcours ont pu prendre par mégarde
>> des passages interdits, ou avoir été faits en fait à pied ou à vélo, mais
>> par un chemin interdit aux véhicules).
>>
>
> Pour rebondir là-dessus, il m'est une fois arrivé de tomber sur un endroit
> qui avait l'air bien cartographié, mais pour lequel j'avais deux ou trois
> imageries qui ne concordaient pas. En chargeant les tracés GPS, j'ai trouvé
> plein de traces, et au moins une concordant avec chaque imagerie, ce qui
> fait que je n'ai pas su si ce qui était cartographié était le résultat des
> travaux ou l'ancienne route...
>
> Y a-t-il moyen de connaître la date d'une trace GPS ou de l'imagerie dans
> JOSM ? Quand j'essaye d'obtenir les métadonnées de l'imagerie j'ai
> uniquement
> la date limite du cache, pas celle de la prise de vue.
>
>
>> Les traces GPS ne sont que des indicateurs de cohérence, ou peuvent servir
>> à détecter des changements récents (en utilisant leurs dates alors que
>> l'imagerie est souvent ambiguë sur les dates effectives des clichés, quand
>> Bing ou d'autres ne mentionnent que ses dates de mise à jour de leur
>> publication sur des secteurs étendus faits d'assemblages de clichés à des
>> tas de dates différentes): une grosse différence sera l'occasion d'aller
>> voir sur place ce qu'il en est réellement.
>>
>
D'ailleurs ce serait bien d'avoir un outil d'analyse comparant les
changements notables de géométrie de parcours GPS qui se mettent à
s'écarter trop de la cartographie: si les parcours sont consistants avec
une date donné et d'un coup changent significativement et sont ensuite
rapportés de façon consistante après cette date, il a du se passer
quelquechose (nouvelle interdiction, changement de sens de circulation,
restriction de voies, sens unique (éventuellement inversé).
Il ne peut s'agir que d'une analyse statistique permettant de tracer un
événement à une date donnée. A partir de là construire une hotmap des
chemins à vérifier: une imagerie alternative plus récente peut
éventuellement le confirmer (mais souvent on doit attendre des mois pour
que ce soit visible sur Bing, ou sur DGStandard qui est souvent de
meilleure qualité et mieux aligné avec le cadastre officiel !).
Je me demande même si on ne devrait pas abandonner Bing pour la France, où
Biung ne semble plus faire aucune mise à jour depuis des lustres et n'est
mis à jour globalement que pour des modifs mineures mais toujours sur des
clichés déjà anciens.
On peut noter aussi que des imageries chinoises commencent à gagner en
précision et dépassent en qualité ce qu'on trouvait avant, malheureusement
pas disponible partout librement, hors des zones demandées et qualifiées
par HOT pour l'urgence dans les pays de développement, mais bien plus à
jour que ce que proposaient les agences européennes ou américaines...

(sauf justement en Chine, hors la RAS de Hong Kong qui a un régime spécial
plus ouvert, le reste étant grossièrement falsifié avec un algo de
transformation propriétaire et non conforme, pseudo-aléatoire, décalant
volontairement les images jusqu'à plusieurs centaines de mètres pour
établir des cartes fausses qui ne sont grossièrement alignées avec les
appareils GPS chinois utilisés en Chine et utilisant une clé d'autorisation
permettant au gouvernement chinois de modifier les paramètres de correction
quand bon lui semble et sans prévenir; pour le reste du monde, notamment en
Afrique, les sources d'imagerie chinoises ne sont pas falsifiées mais au
contraire très précises et adoptent les techniques les plus précises du
moment, avec la volonté d'imposer les moteurs web et portails chinois, et
avec les technologies chinoises).
___
Talk-fr mailing list
Talk-fr@openstreetmap.org
https://lists.openstreetmap.org/listinfo/talk-fr