Näytetään tekstit, joissa on tunniste tiedostolataus. Näytä kaikki tekstit
Näytetään tekstit, joissa on tunniste tiedostolataus. Näytä kaikki tekstit

keskiviikko 5. syyskuuta 2012

Vilskettä verkossa

Kun avasimme maastotietoaineistot, meillä ei ollut tarkkaa käsitystä siitä, kuinka suurta niiden kysyntä tulisi olemaan. Uskoimme toki, että aineistomme kiinnostaisivat - ja toisaalta toivoimme, että olemme osanneet mitoittaa palvelumme niin, että ne kestävät lisääntyvän kysynnän.

Heti ensi hetkistä lähtien on aineistojen kysyntä ollut vilkasta ja on sitä edelleen. Ensimmäisen kolmen kuukauden aikana maastotietoja toimitettiin noin 50 kertaa enemmän kuin ennen avaamista koko vuoden aikana. Kysytyimmät aineistot ovat Peruskartta rasterimuodossa, Maastotietokanta, ortoilmakuvat ja korkeusmalli (10 m ruutukoolla).

Suurin osa hakee maastotiedot itsepalveluna tiedostolatauspalvelun kautta. Syyskuun alkuun mennessä sinne oli tullut yli 37 000 tilausta - yksittäisiä tiedostoja oli ladattu 685 000 kertaa. Tätä vauhtia miljoonan latauksen raja ylittyy jo ennen vuoden vaihdetta.

Myös rajapinta-asiakkaiden määrä on kasvanut huimasti. WMS-rajapinnan käyttösopimuksen on tehnyt yli 100 asiakasta, lisäystä toukokuun alusta 40 %. Kesäkuussa avatun maksuttoman WMTS-palvelun käyttömäärät ovat nekin nousseet rivakasti. Kesäkuussa palveluun tehtiin 40 000 hakua, elokuussa jo yli 300 000.

Koska kuka tahansa voi jakaa aineistoja edelleen meiltä lupia kyselemättä, emme voi tietää tarkasti, kuinka paljon maastotietoja kaiken kaikkiaan on jo ladattu.

Mielenkiinnolla odotamme, millaisia uusia sovelluksia ja palveluita maastotiedoista syntyy. Toivommekin, että kertoisitte niistä meille vaikkapa kommentoimalla tätä kirjoitusta.

Uteliaana kommenttejanne odotellen…

ps. Järjestämme 5.10. Laserkeilaus- ja korkeusmalliseminaariin, jossa esitellään muun muassa ohjelmistoja laser- ja muidenkin aineistojen käsittelyyn, jakeluun ja esittämiseen. Tilaisuuteen on vapaa pääsy. Tervetuloa kuulolle!

keskiviikko 9. toukokuuta 2012

Avoimien aineistojen tiedostopalvelu avattu

Avoimia aineistoja saa nyt ladattua maksutta verkon kautta.

Avoimien aineistojen tiedostopalvelu on karttapohjainen itsepalvelu aineistojen lataamiseen:
  • Valitse ladattava tuote vasemman reunan listasta.
  • Valittua tuotetta koskeva karttalehtijako tulee kartalle. Karttaa pitää mahdollisesti lähentää tai loitontaa, jotta tilattavissa olevat karttalehdet tulevat näkyviin. Paikan voi etsiä myös osoite- tai nimistöhaun avulla.
  • Valitse ne karttalehdet, ne jotka haluat ladata. Valitut lehdet listautuvat näytön oikeaan reunaan.
  • Kun olet valinnut halutut lehdet ja tuotteet, siirry tilaamaan. Anna sähköpostiosoite, hyväksy lisenssiehdot ja lähetä tilaus.
  • Sähköpostiin tulee hetken kuluttua lataussivun osoite. Sivulta saat ladattua tilaamasi tiedostot. Sivulta näet myös tiedostokohtaisia metatietoja, kuten tilaamasi tiedoston päivitysajankohdan. Ne avautuvat +-linkistä.
Ensimmäisinä aineistoina palvelussa ovat ladattavissa Peruskartta, Maastokartta 1:50 000, laserkeilausaineisto ja jo aiemmin avatut aineistot (Kuntajako, Nimistö, Yleiskartat)

Nyt odottelemme miten sovellus maailmalla pärjää. Lisäämme ladattavaa sitä mukaa, kun näemme, että sovellus kestää kuormaa, ja avattavat aineistoversiot valmistuvat.

Jatkossa liitämme tiedostopalvelun osaksi tuotantoamme, jolloin tarkimmat aineistot päivittyvät palveluun heti, kun niihin tulee joku muutos. Laserkeilausaineisto ja ortokuvat on jo nyt viritetty osaksi tuotantoprosessia: uusi tiedosto tulee palveluun heti sen valmistuttua.

Palvelun avaaminen myöhästyi harmittavasti aineiston avaamisen hetkestä.  Viime hetken yllätykset ja sairastapaukset aiheuttivat viivästyksiä  ja käyttöönottoa oli pakko lykätä. Nyt päästiin kuitenkin liikkeelle.

Näemme, että Maanmittauslaitoksen roolina datan jakelussa olisi keskittyä mahdollisimman ajantasaisen aineiston jakeluun. Tehokkaita, uusilla tekniikoilla toteutettuja jakelupalveluita on jo tehty. Toivottavasti teette niitä edelleen lisää. Maastotietoaineistot on nyt avattu, laitetaan ne jakoon ja laajaan käyttöön!

tiistai 17. huhtikuuta 2012

Suuria aineistomääriä voi tilata - myös etukäteen

Maanmittauslaitoksen 1.5. käyttöoikeuksiltaan maksuttomiksi avautuvista maastotietoaineistoista melkoinen joukko on tiedostokooltaan suuria. Aineistojen saantia helpottamaan otetaan toukokuun alkupäivinä käyttöön Avoimien aineistojen tiedostopalvelu. Se vastaa suurimpaan osaan karttadatan käyttäjien tarpeista silloin kun rajapintakäyttö ei ole oikea vaihtoehto.

Suuria tiedostokokoja ja paljon tiedostoja

Tiedostopalvelu ei kuitenkaan ratkaise kaikkien tarpeita. Kun tarvitaan suurimittakaavaisia aineistoja laajoilta alueilta, verkon yli lataaminen ei ole välttämättä ollenkaan hyvä vaihtoehto. Tiedostopalvelussa tarjottavien aineistojen karttalehtijaot on valittu niin, ettei yksittäisen tiedoston koko kasvaisi hankalaksi käsitellä.

Suurikaavaisten aineistojen kohdalla tämä tarkoittaa sitä, että yksi karttalehtitiedosto kattaa vain pienen palan Suomea. Pienikokoisia karttalehtiä mahtuu Suomen alueelle paljon ja sitä kautta ladattavia tiedostojakin voi kertyä tuhansia koko Suomen alueelta.

Tiedostopalveluhan toimii siten, että lataaja saa palvelusta sähköpostin, jossa on linkki verkkosivulle. Tuolta sivulta pääsee lataamaan valitsemansa aineistot itselleen. Tiedosto kerrallaan.

Toisaalta kaikki suurimittakaavaiset aineistot (1:5 000 - 1:100 000) ovat laajoina alueina verkon yli ladattaviksi tiedostokooltaan turhan suuria. Esimerkiksi yhden Peruskarttarasterin 12 km x 12 km -karttalehden koko on noin 13 Mt, ja yksi 6 km x 6 km alueen kattava ilmakuva yli 100 Mt.

Tilaaminen voi olla parempi vaihtoehto

Tiedostopalvelu on itsepalvelu ja sen käyttö on ilmaista. Sitä kautta avoimen aineiston saa siis täysin ilmaiseksi. Tilaamalla aineiston Maanmittauslaitoksen Tietopalvelukeskuksesta sähköpostitse, peritään toimituksesta kulut, koska toimitukset vaativat käsityötä ja toimitusmedian.

Esimerkiksi Maastotietokanta mahtuu muistitikulle ja sen niin sanotun vuosiversion toimituskulut ovat yhteensä 540 euroa (500 € aineiston irrotus ja toimitus 40 € 32 Gt:n muistitikku). Vuosiversioksi sanotaan tietokannasta irrotettua koko maan päivitystä, jota toimitetaan asiakkaalle normaalisti vuoden ajan. Irrotuskustannukset säilyvät pääosin nykyisinä ja niitä voi tarkastella tuotteittain Maanmittauslaitoksen verkkosivuilta (huomaa, että kaikki tuolla sivustolla näkyvät aineistot eivät muutu avoimiksi 1.5.)

Tilauksen voi lähettää osoitteella: myynti[at]maanmittauslaitos.fi. Tilauksessa pitää mainita tilattava aineisto, sen mahdollinen tuoteversio, tiedostoformaatti, koordinaattijärjestelmä (nämäkin tiedot löytyvät yllä olevan linkin takaa tuotekuvauksista) sekä toimitus- ja laskutusosoite. Tilauksessa on myös kuvattava alue, jolta aineiston haluaa tilata.  Ennen Tiedostopalvelun avautumista alueiden hahmottamiseen voi hyvin käyttää Karttapaikkaa.

Tilaukset käsitellään saapumisjärjestyksessä. Avoimia aineistoja ei toimiteta ennen toukokuun alkua. Myöskään kaikki aineistot eivät vielä ole valmiita toukokuun alussa avoimina toimitettaviksi. Otamme kuitenkin ruuhkaa välttääksemme mielellämme vastaan tilauksia aineistoista etukäteen, jotta voimme valmistella niitä toimitettaviksi heti kun mahdollista.

keskiviikko 28. maaliskuuta 2012

Mikä maksaa?

Avaaminen tarkoittaa, ettei aineistojen käytöstä peritä enää käyttöoikeusmaksua.
Toisin sanoen vaikka Maanmittauslaitoksen maastotietoaineistot muuttuvatkin maksuttomiksi, osa tiedoista ja palveluistamme on maksullista vielä 1.5.2012 jälkeen.

Itsepalveluna ilmaiseksi

Kehitämme parhaillaan tiedostolatauspalvelua, josta aineistoja voi ladata käyttöönsä itsepalveluna ilmaiseksi. Latauspalvelu otetaan käyttöön toukokuun alussa, mutta aivan kaikkia palveluun tulossa olevia aineistoja ei sieltä vielä silloin saa. Vaiheittaisella käyttöönotolla haluamme varmistaa, että palvelun käyttö on alusta alkaen mahdollisimman sujuvaa.

Latauspalvelusta ei tule saamaan kaikkia avattavia aineistoja ja käytössä olevia toimitusformaatteja, sillä esimerkiksi tiff-formaatissa olevat ilmakuvat ovat tiedostokooltaan liian suuria latauspalveluun.

Kaikkia avautuvia aineistoja voi tilata suoraan Maanmittauslaitoksesta joko sähköpostitse tai verkkosivujen kautta. Aineisto toimitetaan esimerkiksi CD:llä tai DVD:llä. Tällöin perimme tilauksista irrotus- ja toimituskulut voimassa olevan hinnaston mukaisesti.

Aineistoja myös rajapinnan kautta

Rakennamme avoimille aineistoille uutta rajapintapalvelua (WMTS). Se tulee olemaan maksuton, mutta käyttömäärältään rajoitettu. Pohdimme parhaillaan WMTS-palvelun käyttörajoja, mutta lopullisia päätöksiä ole vielä tehty.

Rasteriaineistojen palvelurajapinnan (WMS) kautta tarjottavat kartta-aineistot ja ortokuvat muuttuvat myös maksuttomiksi 1.5. alkaen. WMS-palvelun kautta saa myös kiinteistötietoja (Kiinteistöjaotus, Kiinteistötunnukset, Kiinteistöjen karttatunnukset). Ne samoin kuin palvelun ylläpito säilyvät maksullisina 1.5. jälkeenkin.

Kiinteistötiedot ja painetut kartat säilyvät maksullisina

Aineistojen avaaminen koskee ainoastaan Maanmittauslaitoksen keräämiä digitaalisia maastotietoja. Maanmittauslaitoksen ja kuntien yhdessä ylläpitämän Kiinteistötietojärjestelmän tiedot (kiinteistörajat, kiinteistörekisteri, lainhuuto- ja kiinnitystiedot) ovat maksullisia 1.5.2012 jälkeenkin. Myös kiinteistöjen kauppahintatiedot säilyvät maksullisina.

Avaaminen ei koske myöskään painettuja karttoja ja karttatulosteita, mutta Karttapaikalta näitä tietoja voi katsoa ilmaiseksi jo vuodesta 1996.

ps. Olethan tutustunut jo avattuihin aineistoihimme? Paikannimiaineistot ja yleiskartta-aineistot mittakaavoissa 1:1 miljoonaan ja 1:4,5 miljoonaan ovat olleet maksuttomassa käytössä vuoden 2011 alusta alkaen.  Kuntarajakartta avattiin ilmaiseksi syksyllä 2011.

keskiviikko 21. maaliskuuta 2012

Uudet toimitusformaatit ortokuville ja laserkeilausaineistoille

Yksi tiedon avaamisen yhteydessä ratkaistavista asioista ovat toimitusformaatit. Koska aineistoja on paljon - ja monet niistä myös suuria kooltaan, toimitusformaatteja voi olla käytössä vain rajallinen määrä.

Viime viikkoina olemme miettineet sopivia toimitusformaatteja latauspalvelussa tarjottaville ortokuville  ja laserkeilausaineistoille, sillä nykyisin käyttämämme olevat formaatit soveltuvat sinne huonosti.

Ortokuvien toimituksessa on käytetty tähän asti tiff-formaattia. Sen tiedostokoko on kuitenkin liian suuri latauspalveluun, sillä yksi 6 km x 6 km kuva on kooltaan noin 420 MB. Ortokuvien latauspalvelussa otetaan käyttöön jpeg2000-formaatti (.jp2).  Kuvat pakkaantuvat silloin noin kolmasosaan alkuperäisestä, mutta kaikki kuvilla oleva informaatio säilyy.

Laserkeilausaineistot saa latauspalvelusta LAZ-formaatissa. Tiedostot tehdään pakkaamalla LAS-formaatissa oleva data LASzip-pakkausohjelmalla. Sovellukset voivat käyttää LAZ-tiedostoja, kunhan sovelluksiin on liitetty tarvittava LASzip ”lisäpalikka”, jonka voi ladata osoitteesta: http://laszip.org/. LASzip on avoimen datan sovellus, jonka pakkaus- ja purkuominaisuudet ovat käyttäjälleen maksuttomia.

Ortokuvia saa edelleen tiff-formaatissa  ja laserkeilausaineistoja LAS-formaatissa, mutta vain tilaamalla erikseen osoitteesta myynti[ät]maanmittauslaitos.fi. Tällöin toimituksista peritään toimituskulut ja korvaus toimitusmediasta. Tällä hetkellä käytössä olevat toimitusformaatit löytyvät avattavien aineistojen tuotekuvauksista.

keskiviikko 14. maaliskuuta 2012

Maastotiedot verkon kautta ladattavaksi

Maastotiedot on toimitettu asiakkaille tiedostoina DVD-levyillä tai suurempia aineistomassoja siirtokovalevyillä. Sovelluksille olemme kyllä tarjonneet mahdollisuutta maastotietojen suorakäyttöönkin. Jo viime vuonna, ennen avaamispäätöstä, käynnistimme projektin tiedostojen toimittamiseksi verkon kautta. Aikaan piti saada tiedostolatauspalvelu.

Loppuvuodesta projektin tavoitetta tarkennettiin, aloimme keskittyä avattavan maastotietoaineiston tiedostolatauspalvelun rakentamiseen. Avattavien aineistojen koko lasketaan  teratavuina, ihan helposti ne eivät verkon yli liiku. Tarkimmat aineistot on pilkottava tuhansiin tiedostoihin, jotka yhdessä kattavat koko Suomen. Halutun tiedoston valintaan päätimme rakentaa karttakäyttöliittymän.

Maanmittauslaitos on tarjonnut jo ennen avoimia paikkatietoaineistoja myös avointa lähdekoodia. Paikkatietoikkunan karttakäyttöliittymän koodi on jaossa www.oskari.org sivustolla. Tiedostolatauspalvelu rakennetaan hyödyntäen tuota koodia, jonka päälle tarvittavat lisätoiminnot Logica Oy toteuttaa. Ja avoimena lähdekoodina sekin tulee aikanaan jakoon oskariin.

Valmista ei vielä ole, mutta palvelu alkaa hahmottua. Pohdimme teidän lataajien kärsivällisyyttä, joko klikata useita latauslinkkejä tai odotella harvempia, mutta isoja tiedostoja. Pohdimme uusia pakkautuvia tiedostomuotoja. Ja pohdimme kuinkahan paljon teitä toukokuun alussa on piuhan päässä odottelemassa avautuneita maastotietoja. Kaikkia avautuvia maastotietoja tuskin yhtä aikaa palveluun laitamme, mutta kerromme julkaisuaikataulun selkeästi. Kohti kevättä siis!

maanantai 27. helmikuuta 2012

Uusia palveluita datan hankintaan

Rakennamme parhaillaan tiedostolatauspalvelua, josta aineistoja voi ladata itsepalveluna. Palvelu on käytössä heti toukokuun alusta Koska joudumme tekemään muutoksia osaan aineistoistamme, emme vielä tiedä varmuudella, mitkä aineistot ovat toukokuun alussa saatavina tiedostolatauspalvelusta. Tämä asia tarkentuu lähiaikoina.

Avoimille aineistoille ollaan myös toteuttamassa uutta rajapintapalvelua (WMTS). Palvelu tulee olemaan maksuton, mutta käyttömäärältään rajoitettu. Sen toteutuksessa hyödynnetään välimuistia ja tiilitekniikkaa, ja se noudattaa WMTS (Web Map Tile Service) -standardia.

WMTS-palvelun käyttöönottopäivää ei ole vielä päätetty. Itse palvelusovellus on jo lähes valmis, mutta muut palvelun pystyttämiseen tarvittavat komponentit ovat vielä työn alla. Asiaan vaikuttavat ratkaisevasti eräät muut tuotantoa kuormittavat hankkeet.

WMTS-Palvelu oli suunniteltu toteutettavaksi heti pilvipalveluna. Pilvipalvelun toteuttaminen tulee selvitystemme mukaan kuitenkin niin kalliiksi, ettei palvelun kilpailutusprosessia olisi ehditty saada valmiiksi ennen kesää. Kevään aikana WMTS-palvelun pilveen vientiä testataan saadaksemme käytännön tietoa suurten datamäärien pilvipalvelusta. Testien perusteella päätetään myöhemmin pilveen viennistä.