Paikkatietoaineistot CSC:n laskentaympäristössä

Paikkatietoaineistot Puhdissa

Puhdissa on seuraavat aineistot:

• Paituli-data. Paituli sisältää aineistoja Digi- ja väestötietovirastolta, Ruokavirastolta, Ilmatieteen laitokselta, Väylävirastolta, Kotimaisten kielten keskukselta, Karelia-ammattikorkeakoululta, Maanmittauslaitokselta, Luonnonvarakeskukselta, Tilastokeskukselta ja Helsingin yliopistolta.
  • Täydellinen lista Paitulin aineistoista
  • Kaikilla Paitulin aineistoilla on readme-tiedosto, jossa on linkki Etsimen aineistokuvauksiin ja käyttöehtoihin.
  • Jos jonkin tiedoston löytäminen on hankalaa, voit käyttää apuna myös Paitulin lataussivua. Näet aineiston polun linkkien alta (poista alkuosa) tai voit ladata tiedostoluettelon kohdasta "Download list of files", jos aineistossa on paljon karttalehtiä.
  • Maanmittauslaitoksen normaaliväriset ortokuvat eivät ole saatavilla Puhdissa, mutta infrapunakuvat ovat.
  • Maanmittauslaitoksen 2 m korkeusmalli, lidar-aineistot ja infrapunaortokuvat päivittyvät Puhdissa automaattisesti joka maanantai.
  • Maanmittauslaitoksen aineistojen lisäykset:
    • 2 m ja 10 m korkeusmalleille sekä infrapunaortokuville on virtuaalirasterit, katso alla kohta Puhdin virtuaalirasterit.
    • Stereoluokiteltua lidar-aineistoa on muokattu hieman. Alkuperäisessä Maanmittauslaitoksen datassa oli virheitä otsaketiedoissa, ja ne on korjattu. Lisäksi aineistoon on lisätty lax-indeksitiedostot.
    • Automaattisesti luokiteltu lidar, 2008–2024. Sisältää indeksikartan juurikansiossa. Viimeisin päivitys 5/2025.
  • Helpoin tapa löytää Paitulin rasteriaineistoja on Paituli STAC -palvelun avulla; siellä on myös linkit Puhdin paikallisiin tiedostoihin.
• SYKE, kaikki avoimet paikkatietoaineistot, saatavilla SYKEn avoimen datan palvelusta. Viimeisin päivitys 1/2025.
• Suomen metsäkeskus, CC BY 4.0 -lisenssi, viimeisin päivitys 8/2023
  • Latvusmalli
  • Ruudut
  • Metsäpeite
  • Metsävarakuviot
• SYKEn ja Ilmatieteen laitoksen tuottamat Landsat-mosaiikit Paikkatietoalusta-hankkeessa
  • Historialliset Landsat-satelliittikuvamosaiikit: 1985, 1990, 1995

Avoin paikkatietodata on tallennettu Puhdissa sijaintiin: /appl/data/geo

Datan käyttö Puhdissa edellyttää CSC-käyttäjätunnusta sekä projektia, jossa Puhti-palvelu on käytössä. Kaikilla Puhdin käyttäjillä on näihin aineistoihin lukuoikeus. Tiedostoja ei tarvitse siirtää: niitä voi käyttää suoraan, ellei niitä tarvitse muokata, jolloin sinun tulee tehdä niistä oma kopio. Puhdin avoimia paikkatietoaineistoja ylläpitää CSC:n henkilöstö. Jos huomaat ongelmia datassa tai toivot uutta aineistoa, ota yhteyttä CSC:n asiakastukeen.

SYKEn ja Ilmatieteen laitoksen Paikkatietoalusta-hankkeessa tuottamat satelliittimosaiikit poistettiin Puhdista 21.11.2023

Poistetut aineistot olivat: Sentinel1 SAR -mosaiikit, Sentinel2-indeksimosaiikit ja Landsat-indeksimosaiikit. Ne ovat saatavilla Ilmatieteen laitoksen omasta objekti­tallennuspalvelusta, jossa on enemmän dataa kuin mitä tallennettiin Puhdin paikallisille levyille. Helpoin tapa löytää PTA-mosaiikkeja Ilmatieteen laitokselta on Paituli STAC -palvelun avulla. Paituli STAC -sivulla on myös käyttöesimerkkejä R:lle ja Pythonille.

Paikkatietoaineistot Altaassa

CSC:n laskentapalveluiden käyttäjät voivat jakaa paikkatietoaineistoja Altaassa muiden käyttäjien kanssa, jos aineiston lisenssiehdot sallivat tämän. Tämä on yhteisöpalvelu, eli kuka tahansa CSC:n käyttäjä voi osallistua ja lisätä dataa Altaaseen. Altaan dataämpärit ovat datan jakajien omistuksessa. Jos haluat jakaa Altaassa olevaa dataasi ja haluaisit aineiston lisättävän tälle sivulle, ota yhteyttä CSC:n asiakastukeen.

Tällä hetkellä saatavilla:

1. Sentinel2 2A-tason kuvat. Maria Yli-Heikkilä (LUKE) ja Arttu Kivimäki (MML/FGI) ovat ladanneet suomalaisia aineistoja kasvukaudelta (noin 10.5.–1.9.) vuodesta 2016 alkaen. Helpoin tapa löytää Altaaseen tallennettu Sentinel-data on Paituli STAC -palvelun avulla. Nämä tiedostot ovat julkisia, joten kuka tahansa voi ladata ne, myös omalta tietokoneelta tai muista palveluista.

Altaassa olevan datan käytöstä, katso CSC:n webinaari Altaasta ja paikkatiedosta ja Paikkatiedostojen käyttö suoraan pilvestä, mukaan lukien Allas-ohje.

Puhdin virtuaalirasterit

Virtuaalirasterit ovat erittäin käytännöllinen käsite suurten rasteriaineistojen käsittelyssä, katso CSC:n Virtuaalirasterit -sivu pidempää selitystä varten sekä ohjeet omien virtuaalirasterien luomiseen, myös STAC-hakutuloksista.

Maanmittauslaitoksen korkeusmallien ja ortokuvien valmiit virtuaalirasterit

CSC on lisännyt virtuaalirasterit Puhdissa oleviin Maanmittauslaitoksen 2 m ja 10 m korkeusmalleihin sekä infrapunaortokuviin. Korkeusmalleille on kaksi virtuaalirasterivaihtoehtoa:

1. Suorat virtuaalirasterit sisältävät lähde-tif-kuvat suoraan ilman hierarkkista rakennetta, yleiskuvia tai valmiiksi laskettuja tilastoja. Suora virtuaalirasteri on tarkoitettu käytettäväksi vain skripteissä. Sitä ei pidä avata QGISissä, ellei olla zoomattu lähelle ja tarvitse avata vain muutamia tiedostoja jne.:

   • 2 m korkeusmalli: /appl/data/geo/mml/dem2m/dem2m_direct.vrt
   • 10 m korkeusmalli: /appl/data/geo/mml/dem10m/dem10m_direct.vrt
   • infrapunaortokuvat: /appl/data/geo/mml/orto/infrared_3067/infrared_euref_direct.vrt

2. Hierarkkinen virtuaalirasteri on tarkoitettu pääasiassa katseluun, esimerkiksi QGISillä. Siinä on hierarkkinen rakenne, jossa kunkin kansion virtuaalirasteri sisältää kaikki kyseiseen kansioon ja sen alikansioihin tallennetut datat. Hierarkkinen tiedostorakenne sisältää myös tilastot (min, max, mean, stddev) ja yleiskuvat jokaiselle vrt-tiedostolle, mikä mahdollistaa esimerkiksi koko korkeusmalliaineiston varsin sujuvan tarkastelun QGISissä. Näin koko aineistoa voidaan tarkastella helposti eri zoomaustasoilla. Voit käyttää alimman tason virtuaalirasteria (esimerkiksi M41 2 m korkeusmallissa) myös skripteissä; ylemmän tason virtuaalirasterit voivat aiheuttaa laskentavirheitä.

   • 2 m korkeusmalli: /appl/data/geo/mml/dem2m/dem2m_hierarchical.vrt

Puhti: luo korkeusmallin virtuaalirastereita omalle alueelle

Joissakin tapauksissa voi olla hyödyllistä luoda virtuaalirastereita, jotka kattavat vain tutkimusalueesi tai jonkin sen osan. CSC on tehnyt Python-skriptin, jolla voidaan luoda virtuaalirastereita rajatulle alueelle Puhdissa olevista Maanmittauslaitoksen 2 m ja 10 m korkeusmalliaineistoista. Sitä käytetään seuraavasti:

module load geoconda
python /appl/soft/geo/vrt/vrt_creator.py dataset polygon_file output_directory

Tuetut dataset-arvot ovat: dem2m, dem10m ja demCombined. Viimeinen vaihtoehto suosii 2 m korkeusmallia aina kun se on saatavilla ja interpoloi muiden alueiden osalta 10 m korkeusmallin 2 m resoluutioon bikubisella interpoloinnilla.

Valinnaiset argumentit:

• -i: luo erillinen vrt jokaiselle polygonille, oletustoiminta on luoda yksi kaikkien polygonien kattava vrt.
• -o: luo yleiskuvat
• -p: tulosteen nimietuliite

Lisenssi ja viittausohje

Yleisesti ottaen kaikilla aineistoilla on avoin lisenssi, mutta tarkat ehdot vaihtelevat hieman; käytössä ovat enimmäkseen CC-BY-4.0-lisenssit. Tarkista lisätiedot readme-tiedostoista.

Mainitse julkaisussasi datan tuottaja lisenssiehtojen mukaisesti sekä CSC ja Geoportti; tämä on tärkeää hankkeen jatkuvuuden ja rahoitusraportoinnin kannalta. Jos käytät Altaassa tarjottua dataa, mainitse myös datan jakava henkilö. Esimerkiksi voit kirjoittaa: "The authors wish to thank CSC - IT Center for Science, Finland (urn:nbn:fi:research-infras-2016072531) and the Open Geospatial Information Infrastructure for Research (Geoportti, urn:nbn:fi:research-infras-2016072513) for data provision".

Onko tämä sivu hyödyllinen?

Kyllä

Kiitos palautteestasi!

Ei

Kiitos! Arvostamme palautettasi.

Kerro meille miten voisimme parantaa tätä sivua ottamalla meihin yhteyttä.