Re: [Talk-ee] Aadressandmed importida OSM-i?

2010-10-18 Thread Margus Väli
Sõnaga iva selles, et hoida tuletatud andmeid nn. read-only mirror
põhimõttel. Praktiliselt võib sellise lähenemisega majade aadressandmete
käsitsi sildistamise üleüldse lõpetada.

mv

On Fri, 2010-10-15 at 11:24 +0300, Margus Väli wrote:
 Muudatuste pealevoogamine ja poolkäsitsi ohjamine on ju puhas 
 utoopia. Pigem tuleks impordil sildistada aadressipunktid ära et hiljem
 oleks neist võimalik automaatselt üle sõita a-la Corine
 polügoonid. Kasvõi tõmmata nad kõik maha ja panna uuesti
 täiega peale?
 
 mv
 
 On Fri, 2010-10-15 at 11:10 +0300, Jaak Laineste wrote:
  Maksimum mida saame teha on lugeda ADS
  muudatusi aeg-ajalt (selleks on XTEE API neil) ja neid siis
  pool-käsitsi
  sisse viia. Lisandused peaks saama peaaegu automaatselt (aga vaja
  kontrollida kas keegi pole juba lisanud), muudatusi/kustutusi üldiselt
  mitte.


___
Talk-ee mailing list
Talk-ee@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-ee


Re: [Talk-ee] Aadressandmed importida OSM-i?

2010-10-15 Thread Margus Väli
Siin saaks ju loovamalt läheneda ja building=yes ümbruskonnas vaadata --
kui punkti läheduses või lausa ümber on maja siis mitte risustada seda
kanti lisa punktiga vaid võrrelda ning lisada aaressandmeid?

mv

On Thu, 2010-10-14 at 11:07 +0300, Jaak Laineste wrote:
 
 -Ma nuputaks siis skripti välja mis ADS andmetabelitest (need
 on CSV failidena maaameti FTP-s saadaval) .osm faili genereerib
 Karlsruhe skeemis. See ei tohiks ka olla väga keerukas tegelikult,
 lihtsalt andmeid on palju. Sadu tuhandeid punkte.
 


___
Talk-ee mailing list
Talk-ee@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-ee


Re: [Talk-ee] Aadressandmed importida OSM-i?

2010-10-15 Thread Mihkel Oviir
Paraku on ADS katastripõhine. Katastriandmestik oleks vajalik, et kuidagi 
loovamalt läheneda, seda aga maa-amet vektorina ei väljasta.

 --
Mihkel Oviir
sook...@yahoo.com






From: Margus Väli margus.v...@gmail.com
To: OpenStreetMap Estonia talk-ee@openstreetmap.org
Sent: Fri, October 15, 2010 10:34:03 AM
Subject: Re: [Talk-ee] Aadressandmed importida OSM-i?

Siin saaks ju loovamalt läheneda ja building=yes ümbruskonnas vaadata --
kui punkti läheduses või lausa ümber on maja siis mitte risustada seda
kanti lisa punktiga vaid võrrelda ning lisada aaressandmeid?

mv

On Thu, 2010-10-14 at 11:07 +0300, Jaak Laineste wrote:
 
 -Ma nuputaks siis skripti välja mis ADS andmetabelitest (need
 on CSV failidena maaameti FTP-s saadaval) .osm faili genereerib
 Karlsruhe skeemis. See ei tohiks ka olla väga keerukas tegelikult,
 lihtsalt andmeid on palju. Sadu tuhandeid punkte.
 


___
Talk-ee mailing list
Talk-ee@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-ee



  ___
Talk-ee mailing list
Talk-ee@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-ee


Re: [Talk-ee] Aadressandmed importida OSM-i?

2010-10-15 Thread Anti Kasuk


Aadress on ju kah katastri p6hine ?
Kui hakata sedasi building=yes teed minema v6ib juhtuda, et maja asemel 
saab aadressi hoopis laut v6i keller.


kasu


___
Talk-ee mailing list
Talk-ee@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-ee


Re: [Talk-ee] Aadressandmed importida OSM-i?

2010-10-15 Thread Margus Väli
Muudatuste pealevoogamine ja poolkäsitsi ohjamine on ju puhas 
utoopia. Pigem tuleks impordil sildistada aadressipunktid ära et hiljem
oleks neist võimalik automaatselt üle sõita a-la Corine
polügoonid. Kasvõi tõmmata nad kõik maha ja panna uuesti
täiega peale?

mv

On Fri, 2010-10-15 at 11:10 +0300, Jaak Laineste wrote:
 Maksimum mida saame teha on lugeda ADS
 muudatusi aeg-ajalt (selleks on XTEE API neil) ja neid siis
 pool-käsitsi
 sisse viia. Lisandused peaks saama peaaegu automaatselt (aga vaja
 kontrollida kas keegi pole juba lisanud), muudatusi/kustutusi üldiselt
 mitte.


___
Talk-ee mailing list
Talk-ee@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-ee


Re: [Talk-ee] Aadressandmed importida OSM-i?

2010-10-15 Thread Margus Väli
Iva on selles, et hoida tuletatud andmeid nn. read-only mirror
põhimõttel. Praktiliselt võib sellise lähenemisega majade aadressandmete
käsitsi sildistamise üleüldse lõpetada.

mv


On Fri, 2010-10-15 at 11:24 +0300, Margus Väli wrote:
 Muudatuste pealevoogamine ja poolkäsitsi ohjamine on ju puhas 
 utoopia. Pigem tuleks impordil sildistada aadressipunktid ära et hiljem
 oleks neist võimalik automaatselt üle sõita a-la Corine
 polügoonid. Kasvõi tõmmata nad kõik maha ja panna uuesti
 täiega peale?
 
 mv
 
 On Fri, 2010-10-15 at 11:10 +0300, Jaak Laineste wrote:
  Maksimum mida saame teha on lugeda ADS
  muudatusi aeg-ajalt (selleks on XTEE API neil) ja neid siis
  pool-käsitsi
  sisse viia. Lisandused peaks saama peaaegu automaatselt (aga vaja
  kontrollida kas keegi pole juba lisanud), muudatusi/kustutusi üldiselt
  mitte.


___
Talk-ee mailing list
Talk-ee@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-ee


Re: [Talk-ee] Aadressandmed importida OSM-i?

2010-10-15 Thread Jaak Laineste
OSM siseselt ei saa kuidagi kontrollida andmeid pärast nende sisestust. Kõik 
mis seal sees on, on juba community oma ja igaüks võib teha nendega mis tahab. 
See on üldine filosoofia ja poliitika ning üldine consensus tundub olevat et 
nii ka jääb.  On arutatud, kas väliseid baasivõtmeid on mõtet selleks lisada, 
ja üldiselt on leitud et ei ole (kuigi sageli on need seal olemas, nt TIGER-is 
ja ka meie Corine-s). Lihtsaim põhjus on et, et keegi ei saa keelata neid 
teisel muutjal eemaldada, muuta jne, keerukam on modimisvajadused, ma olen ise 
ka ühest Corine alast tekitanud mitu, teisi kustutama pidanud jne. Talk ja 
imports-listides on seda korduvalt arutatud, ja leitud et välistel võtmetel 
pole mõtet ja mingeid automaatsünke ehitada nende abil ei saa.

 Kontrollitava (ja seega ka automaatselt uuendatava/süngitava) kihi saab seega 
tekitada väljaspool OSM-i keskbaasi, nii et see jääks maakaart.ee üheks 
(esimeseks mitmest) privaatkihiks. See on ka variant, aga peaks arvestama:
a) privaatkihi eelised:
 - saab tagada 1:1 vastavuse ametliku ADS andmetega
B) puudused:
 - globaalne aadressotsing ei teaks sellest midagi
 - globaalne OSM community, uuendajad ja andmete kasutajad ei teaks sellest 
midagi ega saaks seda kasutada
 - andmeid ei saaks ka meie community parandada, iga järgmine ADS uuendus loeks 
need vigaseks.

Äkki sobiks selline kombineeritud variant:
a) impordime (kahveldame) ADS-I sügis 2010 seisuga OSM-I punktidena. See 
hakkab elama OSM-is omaette elu.
b) kui aega on, tekitame ka ADS ametliku kihi privaatkihina. Tegelikult ma pole 
kindel kas isegi on mõtet sellel, maaameti XGIS-i ja WMS-teenuseid meil mõtet 
dubleerida pole. 
c) Tekitame ADS muudatuste näitamise teenuse, et oma huvitava ala kohta saaks 
redigeerijad kontrollida, mis on alates impordihetkest ADS-is muudetud, et siis 
käsitsi muudatusi oleks lihtsam OSM-I viia (nt kui on kogu tänav juurde tulnud 
kusagil, terve tänava aadresse muudetud vms). 

Jaak

 -Original Message-
 From: talk-ee-boun...@openstreetmap.org [mailto:talk-ee-
 boun...@openstreetmap.org] On Behalf Of Margus Väli
 Sent: Friday, October 15, 2010 11:36 AM
 To: OpenStreetMap Estonia
 Subject: Re: [Talk-ee] Aadressandmed importida OSM-i?
 
 Iva on selles, et hoida tuletatud andmeid nn. read-only mirror
 põhimõttel. Praktiliselt võib sellise lähenemisega majade aadressandmete 
 käsitsi
 sildistamise üleüldse lõpetada.
 
 mv
 
 
 On Fri, 2010-10-15 at 11:24 +0300, Margus Väli wrote:
  Muudatuste pealevoogamine ja poolkäsitsi ohjamine on ju puhas utoopia.
  Pigem tuleks impordil sildistada aadressipunktid ära et hiljem oleks
  neist võimalik automaatselt üle sõita a-la Corine polügoonid. Kasvõi
  tõmmata nad kõik maha ja panna uuesti täiega peale?
 
  mv
 
  On Fri, 2010-10-15 at 11:10 +0300, Jaak Laineste wrote:
   Maksimum mida saame teha on lugeda ADS muudatusi aeg-ajalt (selleks
   on XTEE API neil) ja neid siis pool-käsitsi sisse viia. Lisandused
   peaks saama peaaegu automaatselt (aga vaja kontrollida kas keegi
   pole juba lisanud), muudatusi/kustutusi üldiselt mitte.
 
 
 ___
 Talk-ee mailing list
 Talk-ee@openstreetmap.org
 http://lists.openstreetmap.org/listinfo/talk-ee


___
Talk-ee mailing list
Talk-ee@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-ee


Re: [Talk-ee] Aadressandmed importida OSM-i?

2010-10-15 Thread Margus Väli
Siin tuleb igaühel mingeid surrogaatrekvisiite pidama hakata 
et fikseerida ära millal viimati on OSM andmed ADS omadele
järele lohistatud, et saaks sisuliselt kahe ajahetke vahel
ADS baasi muudatused teatud piirkonnas kätte kui see 
üldse võimalik on. Maaamet väljastab regulaarselt muudatusi
mingite lappide kujul?

mv

On Fri, 2010-10-15 at 11:48 +0300, Jaak Laineste wrote:
 c) Tekitame ADS muudatuste näitamise teenuse, et oma huvitava ala
 kohta saaks redigeerijad kontrollida, mis on alates impordihetkest
 ADS-is muudetud, et siis käsitsi muudatusi oleks lihtsam OSM-I viia
 (nt kui on kogu tänav juurde tulnud kusagil, terve tänava aadresse
 muudetud vms). 


___
Talk-ee mailing list
Talk-ee@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-ee


Re: [Talk-ee] Aadressandmed importida OSM-i?

2010-10-15 Thread Mihkel Oviir
muudatuste jaoks on adsil eraldi x-tee teenus. Jaagu ettepanek on pro. Ei ole 
mingit pointi üritada vägisi asju uuendada, kui osm on olemuselt geoandmete 
wiki. algne import ja edasi tegutseb kommuun. muudatuste näitamise teenus on 
iseenesest hea mõte, küsitav on, kas siis tulevikus hakkame näitama kõiki 
muudatusi alates impordist? pika peale mahukaks ei lähe? Eriti kui ads jälle 
mõne suurema hanke najal mingeid lausalisi uuendusi teeb?
Teenus muidugi võiks ju ka sisaldada muudatuse täägimist tehtud muudatuseks.

 --
Mihkel Oviir
sook...@yahoo.com






From: Margus Väli margus.v...@gmail.com
To: OpenStreetMap Estonia talk-ee@openstreetmap.org
Sent: Fri, October 15, 2010 11:59:57 AM
Subject: Re: [Talk-ee] Aadressandmed importida OSM-i?

Siin tuleb igaühel mingeid surrogaatrekvisiite pidama hakata 
et fikseerida ära millal viimati on OSM andmed ADS omadele
järele lohistatud, et saaks sisuliselt kahe ajahetke vahel
ADS baasi muudatused teatud piirkonnas kätte kui see 
üldse võimalik on. Maaamet väljastab regulaarselt muudatusi
mingite lappide kujul?

mv

On Fri, 2010-10-15 at 11:48 +0300, Jaak Laineste wrote:
 c) Tekitame ADS muudatuste näitamise teenuse, et oma huvitava ala
 kohta saaks redigeerijad kontrollida, mis on alates impordihetkest
 ADS-is muudetud, et siis käsitsi muudatusi oleks lihtsam OSM-I viia
 (nt kui on kogu tänav juurde tulnud kusagil, terve tänava aadresse
 muudetud vms). 


___
Talk-ee mailing list
Talk-ee@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-ee



  ___
Talk-ee mailing list
Talk-ee@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-ee


Re: [Talk-ee] Aadressandmed importida OSM-i?

2010-10-15 Thread Jaak Laineste
Vaatasin nüüd sinna andmetele sisse ka. Sisuliselt on seal võetud ports
registreid: maaregister, ehitis/hooneregister, ja veel mõned; nopitud sealt
välja objekte mis võiksid kuidagi aadressiks kõlvata, neile mingid
koordinaadid leiutatud ja siis ühtekokku pandud. Selle tulemusena tüüpiline
väikemaja saab vähemalt 2 aadressi samade koordinaatidega: üks
hooneregistrist ja üks maaregistrist (kinnistust). Suur maja saab veel iga
korteri kohta selle eraldi, ja kui hooneregistris juhtuvad mitteeluhooned
olema, siis on kõik need ka eraldi aadressobjektidena olemas. See lähenemine
sobib hästi nime järgi otsingusüsteemiks, aga mitte kaardile punktide
näitamiseks.

 

Ühesõnaga – polegi niisama lihtne. Hea on, et koordinaadid on neil samad,
nii et nende kaudu “group by” tehes peaks saama neid koondada ühtpidi. Ja
enamikku ADS asju me võime ignoreerida.

 

Kui seda genesist vaadata, siis võivad tõesti olla muudatused massilised
(tõmmatakse veel mingi register juurde) ja samas meile väheolulised (punkte
lisavad vähe). Suht lootusetu nendega järge pidada.

 

Kui keegi tahab ka neid uurida, siis importisin tabelid meie serverisse ära,
nt phppgadmin-iga on päris mugav näppida. Kasutaja tuleb serverisse tekitada
(unix ja postgres tasemel, Andres eelkõige teeks). Ridu tuleb seal 1-2
miljonit eri objektidel. 

 

Minu plaan oleks:

 

1. Tekitada suht lihtsad PHP skriptikesed, mis teevad baasist võimalikult
hea SQL peale .osm faili nodedega addr:street addr:… tag-idega, kuidagi
grupeerituna. Näiteks peaks saama teha linnade kaupa majad ja maakondade
kaupa talud; kuigi aadressiobjekt kui selline sealt ei pruugi otseselt välja
tulla.

2. Nende abil teha import ära. Esmalt meie testmasinasse (well, dev.osm.org
on ka tegelikult olemas), kui seal midagi vastu ei karju, siis
pärismasinasse

3. Suht lihtne on uuendada meie koopiat ADS-ist: postgres baas on tehtud
sama struktuuriga, nii et 1. ftp, 2.unzip 3.psql copy käsud ja ongi olemas.
Päris automaatselt ei saa, sest tundub et FTP-sse pannase andmeid üles
suvalise failinimega suvalisel ajal (viimati 27.09 tundub).

4. Kui aeg-ajalt uuendada baasi, siis samade skriptide abil saame tegelikult
ka up-to-date .osm failid, mida saab siis (võibolla) hiljem ka võrrelda
hetkeseisuga. Näiteks aasta pärast.

 

 

From: talk-ee-boun...@openstreetmap.org
[mailto:talk-ee-boun...@openstreetmap.org] On Behalf Of Mihkel Oviir
Sent: Friday, October 15, 2010 12:28 PM
To: OpenStreetMap Estonia
Subject: Re: [Talk-ee] Aadressandmed importida OSM-i?

 

muudatuste jaoks on adsil eraldi x-tee teenus. Jaagu ettepanek on pro. Ei
ole mingit pointi üritada vägisi asju uuendada, kui osm on olemuselt
geoandmete wiki. algne import ja edasi tegutseb kommuun. muudatuste
näitamise teenus on iseenesest hea mõte, küsitav on, kas siis tulevikus
hakkame näitama kõiki muudatusi alates impordist? pika peale mahukaks ei
lähe? Eriti kui ads jälle mõne suurema hanke najal mingeid lausalisi
uuendusi teeb?
Teenus muidugi võiks ju ka sisaldada muudatuse täägimist tehtud muudatuseks.

 

--
Mihkel Oviir
sook...@yahoo.com

 

 

  _  

From: Margus Väli margus.v...@gmail.com
To: OpenStreetMap Estonia talk-ee@openstreetmap.org
Sent: Fri, October 15, 2010 11:59:57 AM
Subject: Re: [Talk-ee] Aadressandmed importida OSM-i?

Siin tuleb igaühel mingeid surrogaatrekvisiite pidama hakata 
et fikseerida ära millal viimati on OSM andmed ADS omadele
järele lohistatud, et saaks sisuliselt kahe ajahetke vahel
ADS baasi muudatused teatud piirkonnas kätte kui see 
üldse võimalik on. Maaamet väljastab regulaarselt muudatusi
mingite lappide kujul?

mv

On Fri, 2010-10-15 at 11:48 +0300, Jaak Laineste wrote:
 c) Tekitame ADS muudatuste näitamise teenuse, et oma huvitava ala
 kohta saaks redigeerijad kontrollida, mis on alates impordihetkest
 ADS-is muudetud, et siis käsitsi muudatusi oleks lihtsam OSM-I viia
 (nt kui on kogu tänav juurde tulnud kusagil, terve tänava aadresse
 muudetud vms). 


___
Talk-ee mailing list
Talk-ee@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-ee

 

___
Talk-ee mailing list
Talk-ee@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-ee


Re: [Talk-ee] Aadressandmed importida OSM-i?

2010-10-14 Thread Andres Kaaber
2010/10/14 Jaak Laineste j...@openstreetmap.ee:
 Hoi,

 Kirjutasin http://code.google.com/p/maakaart-ee/wiki/AadressOtsing ja tuli
 ette kui palju hoiaksime aega/raha kokku kui impordiksime Aadressregistri
 andmed , mida Mmet on lahkelt lubanud kasutada, OSM baasi node-tasemel
 aadresspunktidena. Näiteks Prahas tundub et on majade aadressid just
 niimoodi pandud, sidumata neid hoonetega.



 Sisuline probleem on osade linnadega (Tartu, mõni vist veel), kus on
 paljudel majajoontel juba aadressid küljes. Seal tekiksid topeltandmed.
 Samas üksikuid linnu on suht lihte välja lõigata.



 Mingi aeg tagasi Nominatim majatäpsusega aadresse ei leidnud, aga nüüd on
 hakanud leidma.



 Ettepanek:

 -    Andres, äkki sa tekitaks OSM nn API andmebaasi Eesti andmetega meie
 serverisse? Sinna saaks teha siis prooviimpordi, ja saab näha mis saab. Siis
 oleks ka API-t ennast (rails_port kui täpne olla) vaja, aga selle install on
 tegelt suht lihtne. Lihtsamgi kui Mapnik/Tirex (mis muide sai eile käima
 lõpuks).

 -    Ma nuputaks siis skripti välja mis ADS andmetabelitest (need on CSV
 failidena maaameti FTP-s saadaval) .osm faili genereerib Karlsruhe skeemis.
 See ei tohiks ka olla väga keerukas tegelikult, lihtsalt andmeid on palju.
 Sadu tuhandeid punkte.



 Küsimusi:

 -    Oleks see hea mõte?

 -    Mis andmed täpselt importida – kas kõik, või ainult maja-aadressid?
 ADS-is on ka igasugu muid asju, nt talud nimedega, suuremad üksused nagu
 külad, vallad jms.


Hea mõte. Mida importida valla ja küla nimesid vist ei ole, kuna need
on juba olemas aga talunimed oleks küll seksikas :). Ma arvan, et kui
saaks mingi näidis andmed sealt kätte siis saaks otsustada.

-- 
A. Kaaber

___
Talk-ee mailing list
Talk-ee@openstreetmap.org
http://lists.openstreetmap.org/listinfo/talk-ee