Trafin avoindata

[Jari Välimaa]

Trafin avoimessa datassa löytyy mm. koko Suomen rautatiekalustorekisteri:

Rautateiden kalustorekisterin avoin data V1.2- aineisto sisältää Suomen rataverkolle rekisteröityjen kalustoyksiköiden rekisteröinti- ja teknisiä tietoja Trafin ylläpitämästä kalustorekisteristä.

https://www.trafi.fi/tietopalvelut/avoin_data

on tiedostona, jonka muoto on .csv.

[Teemu Sirkiä]

Valitettavasti Trafi haluaa pitää aineiston kovin hyödyttömänä, koska kalustonumeroita ei julkaista.

[Jarmo Puntanen]

Valitettavasti Trafi haluaa pitää aineiston kovin hyödyttömänä, koska kalustonumeroita ei julkaista.

Eli mitä kansalaisilta siis nyt pimitetään?

[Runar Ruuska]

]Eli mitä kansalaisilta siis nyt pimitetään?

Kalustonumeroita?

[Jarmo Puntanen]

]Eli mitä kansalaisilta siis nyt pimitetään?

Kalustonumeroita?

Anteeksi että en ole asiaan syventynyt, ja kysymys oli kai jotenkin tyhmä mutta ko. tiedostossa on

-sarjatunnus
-sarjanumero
-alasarjanumero
-EU-sarjatunnus

Eli:

--mitä kansalaiselle olisi tämän päälle vielä pitänyt kertoa?
--mitä lisäarvoa kansalainen saa tällä tiedolla?

[Olli Keski-Rahkonen]

Vaikuttaa oikein hyvältä, vaikkei kalustoyksikön yksilöiviä numeroita olekaan julkaistu. Sarjanumeron, alasarjanumeron tai EU-sarjatunnuksen perusteella ei kalustoa voi tässä datassa yksilöidä.

Data kuitenkin sisältää ikäviä sudenkuoppia, esimerkiksi sen mukaan merkittävä osa rautatiekalustosta olisi valmistunut vuonna 2011. Toivottavasti tähän saataisiin korjaus.



Käsittelin csv-datan nopeasti helpommin pureksittavaan muotoon Excelissä, jos muitakin kiinnostaa katsoa tarkemmin mitä kalustorekisteri sisältää:
http://okeskira.kapsi.fi/liikennevirasto_rautatiekalustorekisteri_avoin_data V1.2.xlsx

[Jarmo Puntanen]

Vaikuttaa oikein hyvältä, vaikkei kalustoyksikön yksilöiviä numeroita olekaan julkaistu. Sarjanumeron, alasarjanumeron tai EU-sarjatunnuksen perusteella ei kalustoa voi tässä datassa yksilöidä.

Minä vaan ihmettelen että mikä tuon mainitun yksilöinnin estää?

Onko esim siis samalla tietokombinaatiolla olemassa useita yksiköitä?  Nähdäkseni ei.

Mikä siis on tarkasti ottaen se puuttuva tieto, joka pitäisi näyttää? Ja mitä käytännön lisäarvoa kansalainen saisi sen tiedettyään?

[Marko Anttila]

Tuossa mainitussa CSV -tiedostossa ns. "sarjanumero" ei tarkoita yksittäisen vaunun ainutlaatuista yksilöivää numeroa, vaan tässä tapauksessa "sarjanumero" on yhden vaunusarjan / vaunutyypin sarjanumero tms. sarjan tunniste. Operaattorit taitavat haluta pitää "liikesalaisuutensa" yksittäisistä vaunuista (tai tiedäpä häntä mistä on kyse?). Kannattaa perehtyä tiedoston sisältöön.

Tyhmästi CSV tiedostoon on talletettu desimaaliluvut pisteellä "." erotettuna, eli suomi-asetuksilla windows-koneessa MS excel tulkitsee nämä luvut päivämääriksi oletusarvoisesti. Käyttäjän pitää olla siis tarkkana.

[Jarmo Puntanen]

Tuossa mainitussa CSV -tiedostossa ns. "sarjanumero" ei tarkoita yksittäisen vaunun ainutlaatuista yksilöivää numeroa, vaan tässä tapauksessa "sarjanumero" on yhden vaunusarjan / vaunutyypin sarjanumero tms. sarjan tunniste. Operaattorit taitavat haluta pitää "liikesalaisuutensa" yksittäisistä vaunuista (tai tiedäpä häntä mistä on kyse?). Kannattaa perehtyä tiedoston sisältöön.

Minä en ymmärrä nyt yhtään mitään mitä tuo ylläoleva tarkoittaa.

Onko jollakulla siis operoinnissa rautatiekalustoa, jota ei ole ilmaistu yllä olevassa listassa? Kenellä? Missä?
Vai onko tieto vääristeltyä? Onko kalustossa sitten jotain tahallaan harhaanjohtavia merkintöjä?

[Olli Keski-Rahkonen]

Minä en ymmärrä nyt yhtään mitään mitä tuo ylläoleva tarkoittaa.

Onko jollakulla siis operoinnissa rautatiekalustoa, jota ei ole ilmaistu yllä olevassa listassa? Kenellä? Missä?
Vai onko tieto vääristeltyä? Onko kalustossa sitten jotain tahallaan harhaanjohtavia merkintöjä?

Väännetäänpä rautalangasta. Esimerkiksi Sr1-sarjan vetureille kalustorekisteri sisältää 109 kappaletta identtisiä rivejä, joiden sisältö on sarjatunnuksen ja -numeron osalta seuraava:

Laji	Sarjatunnus	Sarjanro	Alasarjanro
Veturit	Sr1	21110	0
Veturit	Sr1	21110	0

Rivien määrä siis vastaa veturien todellista käytössä olevaa määrää, mutta veturiyksilöitä datasta ei voi erotella. Yksilöiden erottelu kertoisi esimerkiksi kyseisen veturin valmistusajankohdan tai muita yksilökohtaisesti muuttuvia teknisiä tietoja. Erityisen paljon hyötyä yksilöinnistä olisi vaunukaluston kohdalla, jossa sarjojen sisällä on paljon eroavaisuuksia.

[Jarmo Puntanen]

Minä en ymmärrä nyt yhtään mitään mitä tuo ylläoleva tarkoittaa.

Onko jollakulla siis operoinnissa rautatiekalustoa, jota ei ole ilmaistu yllä olevassa listassa? Kenellä? Missä?
Vai onko tieto vääristeltyä? Onko kalustossa sitten jotain tahallaan harhaanjohtavia merkintöjä?

Väännetäänpä rautalangasta. Esimerkiksi Sr1-sarjan vetureille kalustorekisteri sisältää 109 kappaletta identtisiä rivejä, joiden sisältö on sarjatunnuksen ja -numeron osalta seuraava:

Laji	Sarjatunnus	Sarjanro	Alasarjanro
Veturit	Sr1	21110	0
Veturit	Sr1	21110	0

Rivien määrä siis vastaa veturien todellista käytössä olevaa määrää, mutta veturiyksilöitä datasta ei voi erotella. Yksilöiden erottelu kertoisi esimerkiksi kyseisen veturin valmistusajankohdan tai muita yksilökohtaisesti muuttuvia teknisiä tietoja. Erityisen paljon hyötyä yksilöinnistä olisi vaunukaluston kohdalla, jossa sarjojen sisällä on paljon eroavaisuuksia.

Kiitos että joku puhuu tällaiselle tolvanalle selväkieltä!

Eli siis tuo "sarjanumero" ei olekaan sarjanumero siinä mielessä kuin rautatiemaallikot kuten minä sen ymmärtävät, vaan jotain ihan muuta. Kyseessä siis ei ole juokseva numero!?

Esim lentokoneissa sarjanumero (s/n) on juokseva numero ja joskus se on muotoa tyypin_juoksevanumero/valmistajan_juoksevanumero esim 9/33040 ("Yhdeksäs tehty DC-9 kautta 33040. kone koskaan ulos linjalta")

Tässähän on teille kiinnostuneille tuhannen taalan paikka TÄYDENTÄÄ tuo tiedosto mieleiseksenne. Sehän on julkaistu CC-lisenssin alla, jota voi vapaasti muokata, kunhan julkaisee sen samalla lisenssillä!


 

[Olli Keski-Rahkonen]

Tässähän on teille kiinnostuneille tuhannen taalan paikka TÄYDENTÄÄ tuo tiedosto mieleiseksenne. Sehän on julkaistu CC-lisenssin alla, jota voi vapaasti muokata, kunhan julkaisee sen samalla lisenssillä!

Toki näinkin voidaan tehdä, mutta yli 10000 rivin täydentäminen käsityönä saa jää jollekin jolla on siihen aikaa ja pääsy tarvittaviin lisätietolähteisiin.

Trafillahan on tietenkin tämä tieto olemassa, mutta he eivät julkaise sitä yksityisyydensuojaan vedoten. Vesi- ja maantiekulkuneuvoille rekisterinumeron (joka vastaisi rautatiekaluston sarjanumeroa) julkaisematta jättämisen ymmärrän, mutta rautatatiekalustolle tämä selitys on vähintään ontuva. Suurimman osan kalustosta omistaa VR Groupiin kuuluvat yritykset, ja lopuista omistussuhteista on melko helppo tehdä johtopäätökset muiden tietojen perusteella. Rautatieharrastajille suuri osa tämän avoimen datan arvosta olisi nimenomaan kaluston numerointitiedot, jolla olisi helppo yhdistää nykytilanne aiemmin julkaistuun ja saatavilla olevaan dataan, esimerkiksi VR:n vanhat historiikit.

[Jarmo Puntanen]

melko helppo tehdä johtopäätökset muiden tietojen perusteella.

Väistämättä joudun nyt viittaamaan siihen mitä sanoin yllä, eli muokata saa.

Kalustollahan ei ole mitään "yksityisyyden suojaa", sen enempää kuin yrityksilläkään.

[Olli Keski-Rahkonen]

Väistämättä joudun nyt viittaamaan siihen mitä sanoin yllä, eli muokata saa.

Kalustollahan ei ole mitään "yksityisyyden suojaa", sen enempää kuin yrityksilläkään.

Tällä foorumilla jankkaaminen ei edistä asiaa millään tavoin. Katsotaan kuitenkin, reagoiko Trafi palautteeseeni tästä aiheesta. On joka tapauksessa mainio juttu että rautatiekalustoekisteristä on julkaistu avointa dataa!

[Jari Välimaa]

jos on jotain puuttuvaa tai ongelmaa tiedoissa kannattaa tosiaan olla yhteydessä Trafiin ja muistutus : jos muokkaatte niin tuo Trafin tiedostoa, niin se uusiutuu 4 kertaa vuodessa sisältäen uudet/poistetut tiedot. . Joten voi olla tyhjää hommaa.

[Teemu Sirkiä]

Tällä foorumilla jankkaaminen ei edistä asiaa millään tavoin. Katsotaan kuitenkin, reagoiko Trafi palautteeseeni tästä aiheesta.

Kysyin tuota asiaa jo joulukuussa. Trafin mukaan numeroiden lisäämistä ei nähty aiheelliseksi, mutta kuitenkin lupailtiin, että niitä ehkä voisi tulevissa versioissa näkyä. No, ei ole näkynyt.

[Jarmo Puntanen]

Väistämättä joudun nyt viittaamaan siihen mitä sanoin yllä, eli muokata saa.

Kalustollahan ei ole mitään "yksityisyyden suojaa", sen enempää kuin yrityksilläkään.

Tällä foorumilla jankkaaminen ei edistä asiaa millään tavoin. Katsotaan kuitenkin, reagoiko Trafi palautteeseeni tästä aiheesta. On joka tapauksessa mainio juttu että rautatiekalustoekisteristä on julkaistu avointa dataa!

Sanoin edellä vain sen, että kalustolla ei ole mitään "yksityisyyden suojaa", eikä myöskään firmoilla.

Jos Trafi sellaiseen on oikeasti viitannut, se on ollut pelkkää höpötystä.

Avoin datahan on avointa, eli siihen voi itse lisätä niitä puuttuvia tietoja. Jos se on vieläpä helppoa, kuten sanoit edellä, niin eikö siinä olisi yksi mielekäs harrastelukohde?

Ja tietenkin se poliittinen lisäpointti on se, että kun lisäätte siihen dataan ne mielestänne puuttuvat tiedot, niin Trafikin tajuaa, että niiden julkaisematta jättämisessä ei ole mitään järkeä!
 

[Panu Breilin]

Tällä foorumilla jankkaaminen ei edistä asiaa millään tavoin. Katsotaan kuitenkin, reagoiko Trafi palautteeseeni tästä aiheesta.

Kysyin tuota asiaa jo joulukuussa. Trafin mukaan numeroiden lisäämistä ei nähty aiheelliseksi, mutta kuitenkin lupailtiin, että niitä ehkä voisi tulevissa versioissa näkyä. No, ei ole näkynyt.

Kuulemma kaluston numerot voisi saada Trafista asiakirjapyynnön avulla. Mutta vain maksua vastaan, mikä on kyllä aika selkeästi ristiriidassa julkisuuslain kanssa...

[Panu Breilin]

Avoin datahan on avointa, eli siihen voi itse lisätä niitä puuttuvia tietoja. Jos se on vieläpä helppoa, kuten sanoit edellä, niin eikö siinä olisi yksi mielekäs harrastelukohde?

Ja tietenkin se poliittinen lisäpointti on se, että kun lisäätte siihen dataan ne mielestänne puuttuvat tiedot, niin Trafikin tajuaa, että niiden julkaisematta jättämisessä ei ole mitään järkeä!

Kaluston numeroiden lisääminen tuollaiseen aineistoon edellyttäisi käytännössä sitä, että kävisi fyysisesti tarkistamassa sen numeron jokaisen suomalaisen vaunun, veturin tms. kyljestä. Se taas on käytännön elämässä mahdoton tehtävä.

Silloinkin tosin jäisivät vaille numeroa ne tietueet rekisterissä, jotka koskevat vaunuja ja vetureita jotka tosiasiassa on jo romutettu.

[Jarmo Puntanen]

Kaluston numeroiden lisääminen tuollaiseen aineistoon edellyttäisi käytännössä sitä, että kävisi fyysisesti tarkistamassa sen numeron jokaisen suomalaisen vaunun, veturin tms. kyljestä. Se taas on käytännön elämässä mahdoton tehtävä.

Silloinkin tosin jäisivät vaille numeroa ne tietueet rekisterissä, jotka koskevat vaunuja ja vetureita jotka tosiasiassa on jo romutettu.

Niin ja tämä porukkahan kai sitten inhoaa kaikenlaista rautatiekaluston katselemista ja tietojen kirjailua?
Tuskin kai mitään kuviakaan ole otettu?

Toisaalta tiedetään suurinpiirtein lähtikö sorajuna Punktiovaarasta Änkyränperälle torstaisin 2 vaiko jopa 1 j.p.p. vuonna 1907, mutta sitten toisaalta ollaan varsinaisen asian kanssa kädettömiä.

[Teemu Sirkiä]

Kuulemma kaluston numerot voisi saada Trafista asiakirjapyynnön avulla. Mutta vain maksua vastaan, mikä on kyllä aika selkeästi ristiriidassa julkisuuslain kanssa...

Jouluna hinta olisi ollut n. 200 euroa. Ei tuo nyt sinällään ole riistiriidassa, sillä jos kyseessä ei ole suoraan julkinen asiakirja, jonka voisi luovuttaa, vaan tiedot pitäisi poimia erikseen rekisteristä, niin siitä saa laskuttaa viranomaiselle aiheutuvien kulujen mukaisen summan (Laki viranomaisten toiminnan julkisuudesta, 34 §). Minua kuitenkin pyydettiin perustelemaan aineiston käyttötarkoitus, mikä ei ole hengen mukaista.

[Jarmo Puntanen]

Jouluna hinta olisi ollut n. 200 euroa. Ei tuo nyt sinällään ole riistiriidassa, sillä jos kyseessä ei ole suoraan julkinen asiakirja, jonka voisi luovuttaa, vaan tiedot pitäisi poimia erikseen rekisteristä, niin siitä saa laskuttaa viranomaiselle aiheutuvien kulujen mukaisen summan (Laki viranomaisten toiminnan julkisuudesta, 34 §). Minua kuitenkin pyydettiin perustelemaan aineiston käyttötarkoitus, mikä ei ole hengen mukaista.

Niin no sinähän voi ilmoittaa käyttötarkoitukseksi ihan minkä tahansa itse haluat ilmoittaa, mutta tärkeintä olisi tietää, oliko tiedon käytölle asetettu jotain rajoituksia?

[Teemu Sirkiä]

Niin no sinähän voi ilmoittaa käyttötarkoitukseksi ihan minkä tahansa itse haluat ilmoittaa, mutta tärkeintä olisi tietää, oliko tiedon käytölle asetettu jotain rajoituksia?

Sanatarkka lainaus on:

yksikkönumerot sekä kaluston omistaja ovat julkista tietoa, jota kuitenkin voi rajoittaa laki viranomaisten toiminnan julkisuudesta (621/1999) sekä henkilötietolaki (523/1999)

Se on sitten tietysti eri asia, miten tieto voi olla julkista, mutta sitä voi rajoittaa jotkin seikat. Tiedon pitäisi joko olla julkista tai sitten ei ollenkaan, tuollaista välimuotoa ei pitäisi olla olemassa.

[Teemu Sirkiä]

Kaluston numeroiden lisääminen tuollaiseen aineistoon edellyttäisi käytännössä sitä, että kävisi fyysisesti tarkistamassa sen numeron jokaisen suomalaisen vaunun, veturin tms. kyljestä.

Sekään ei riitä eikä toimi, koska et siitä huolimatta tietäisi, mihin Dv12-veturin riviin esimerkiksi liittäisit numeron 2567.

[Jarmo Puntanen]

Kaluston numeroiden lisääminen tuollaiseen aineistoon edellyttäisi käytännössä sitä, että kävisi fyysisesti tarkistamassa sen numeron jokaisen suomalaisen vaunun, veturin tms. kyljestä.

Sekään ei riitä eikä toimi, koska et siitä huolimatta tietäisi, mihin Dv12-veturin riviin esimerkiksi liittäisit numeron 2567.

Varmaan siihen riviin, joka parhaiten vastaa todellisuutta, esim käyttöönottopäivää.