Paikkatietoaineistot CSC:n laskentaympäristössä

Page undergoing cleanup after Puhti and Mahti retirement

This page contains outdated references to Puhti and/or Mahti, which have now been decommissioned. The page is undergoing changes to reflect CSC's new supercomputer Roihu.

Learn more about Roihu.

Paikkatietoaineistot Roihussa

Alla luetellut aineistot tarjotaan CSC:n hallinnoimien Roihun aineistoprojektien kautta. Ne on liitetty polun /dataset/<dataset-project-id> alle, ja kaikki Roihun käyttäjät voivat lukea niitä. Sinun ei tarvitse luoda tai liittyä näihin aineistoprojekteihin.

Käytä tiedostoja suoraan hakemistosta /dataset. Jos sinun täytyy muokata aineistoa, kopioi tarvittavat tiedostot ensin laskentaprojektisi hakemistoon /scratch/<project-id>.

Roihussa ovat saatavilla seuraavat julkiset paikkatietoaineistot:

Path	Dataset collection
`/dataset/project_2019680`	Paituli-aineistot
`/dataset/project_2019679`	MML:n automaattisesti luokiteltu lidar
`/dataset/project_2019681`	Suomen metsäkeskuksen aineistot

Lisätietoa kustakin aineistosta:

Hakemistossa /dataset/project_2019680 ovat Paituli-aineistot. Paituli sisältää aineistoja Digi- ja väestötietovirastolta, Ruokavirastolta, Ilmatieteen laitokselta, Väylävirastolta, Kotimaisten kielten keskukselta, Karelia-ammattikorkeakoululta, Maanmittauslaitokselta, Luonnonvarakeskukselta, Tilastokeskukselta, Ruotsin maatalousyliopistolta ja Helsingin yliopistolta.
- Täydellinen lista Paitulin aineistoista
- Jos tiedoston löytäminen on hankalaa, voit käyttää apuna myös Paitulin lataussivua. Näet aineiston polun linkkien alta (poista alkuosa), tai voit ladata tiedostoluettelon kohdasta "Download list of files", jos aineistossa on paljon karttalehtiä.
- MML-aineistojen lisäykset:
  - 2 m, 10 m ja 25 m korkeusmalleille on virtuaalirasterit, ks. alla Roihun virtuaalirasterit.
  - Stereoluokiteltua lidar-dataa on muokattu hieman. Alkuperäisessä MML:n datassa oli virheitä otsaketiedoissa, ja ne on korjattu. Lisäksi mukaan on lisätty lax-indeksitiedostot.
- Helpoin tapa löytää Paitulin rasteriaineistoja on Paituli STAC -palvelun avulla; siellä on myös linkit Roihun paikallisiin tiedostoihin.
Hakemistossa /dataset/project_2019679 on MML, automaattisesti luokiteltu lidar, 0.5 p / m2, vuodesta 2008 alkaen.
- Sisältää indeksikartan juurihakemistossa.
Hakemistossa /dataset/project_2019681 ovat Suomen metsäkeskuksen aineistot:
- Latvusmalli
- Hilat Toistaiseksi vain osa tiedostoista on saatavilla Roihussa. Kaikki tiedostot lisätään syksyn 2026 aikana.
- Metsämaski Päivitetty 7/2026. Tiedostot on purettu Roihussa.
- Metsävarakuviot Vuoden 2022 versio. Päivitetään syksyn 2026 aikana.

Kaikissa aineistoissa on README-tiedosto, jossa on aineiston nimi suomeksi ja englanniksi sekä linkit aineiston täydelliseen kuvaukseen ja lisenssiin.

Puhdissa oli myös:

SYKE, kaikki avoimet paikkatietoaineistot saatavilla SYKEn avoimen datan palvelusta. Tulevaisuus on vielä avoin; ilmoita CSC:n asiakastukeen, jos tarvitset tätä.
MML:n ortokuvat eivät ole kopioituina Roihuun. Käytä niitä Paituli STAC -palvelun kautta.
Historialliset Landsat-satelliittikuvamosaiikit: 1985, 1990, 1995. Näitä ei lisätä Roihuun. Paituli STAC sisältää SYKEn vuosittaiset Landsat-mosaiikit; hae data STACin kautta.
Joillekin aineistoille automaattiset datapäivitykset; tavoitteena on saada nämä toimimaan myös Roihussa syksyn aikana.

Datan käyttö Roihussa edellyttää CSC-käyttäjätunnusta sekä projektia, jossa Roihu-palvelu on käytössä. Kaikilla Roihun käyttäjillä on lukuoikeus näihin aineistoihin. Tiedostoja ei tarvitse siirtää: niitä voi käyttää suoraan, ellei niitä tarvitse muokata, jolloin sinun täytyy tehdä niistä oma kopio. Roihun avoimia paikkatietoaineistoja ylläpitää CSC:n henkilöstö. Jos huomaat ongelmia datassa tai toivot uutta aineistoa, ota yhteyttä CSC:n asiakastukeen.

Roihun virtuaalirasterit

Virtuaalirasterit ovat erittäin käytännöllinen käsite suurten rasteriaineistojen käsittelyssä. Katso CSC:n sivu Virtual rasters, jossa on pidempi selitys sekä ohjeet omien virtuaalirasterien luomiseen, myös STAC-haun tuloksista.

MML:n korkeusmallien valmiit virtuaalirasterit

CSC on lisännyt joihinkin aineistoihin virtuaalirastereita Roihuun. Korkeusmalleille on kaksi virtuaalirasterivaihtoehtoa:

Suorat virtuaalirasterit sisältävät lähde-tif-kuvat suoraan ilman hierarkkista rakennetta, yleiskatselukuvia tai esilaskettuja tilastoja. Suora virtuaalirasteri on tarkoitettu käytettäväksi vain skripteissä. Sitä ei pidä avata QGISissä, ellei olla zoomattu lähelle ja tarvitse avata vain muutamia tiedostoja jne.:
- MML 2 m DEM: /dataset/project_2019680/mml/dem2m/dem2m_direct.vrt
- MML 10 m DEM: /dataset/project_2019680/mml/dem10m/dem10m_direct.vrt
- MML 25 m DEM: /dataset/project_2019680/mml/dem25m/tif_cog/2000/dem25m.vrt
- Useisiin LUKE:n aineistoihin on myös lisätty .vrt-tiedostoja.
Hierarkkinen virtuaalirasteri on tarkoitettu pääasiassa katseluun, esimerkiksi QGISillä. Siinä on hierarkkinen rakenne, jossa kunkin kansion virtuaalirasteri sisältää kaikki kyseiseen kansioon ja sen alikansioihin tallennetut datat. Hierarkkinen tiedostorakenne sisältää myös tilastot (min, max, mean, stddev) ja yleiskatselukuvat jokaiselle vrt-tiedostolle, mikä mahdollistaa koko DEM-aineiston varsin responsiivisen tarkastelun esimerkiksi QGISissä. Näin koko aineistoa voidaan tarkastella helposti eri zoomaustasoilla. Voit käyttää alimman tason virtuaalirasteria (esimerkiksi M41 2 m DEM:ssä) myös skripteissä; ylemmän tason virtuaalirasterit voivat aiheuttaa laskentavirheitä.
- MML 2 m DEM: /dataset/project_2019680/mml/dem2m/dem2m_hierarchical.vrt

Paituli STAC

STAC on erinomainen vaihtoehto rasteriaineistojen hakuun ja lataamiseen. Paituli STAC sisältää tällä hetkellä noin 175 suomalaista rasteriaineistoa:

~125 aineistoa Paitulista. Kaikissa Paitulin aineistoissa on 2 assetia – yksi julkisella URL-linkillä dataan ja yksi Puhdille tarkoitettu polku. Puhdille tarkoitetut polut voidaan ja niitä tulee käyttää vain silloin, kun työskennellään CSC:n supertietokone Puhdissa.
ESA, Sentinel-2-tuotteet, käsitelty Level-2A-tasolle (Surface Reflectance), valikoima enimmäkseen pilvettömiä tuotteita Suomesta. Ladattu CSC:n Altaaseen Maria Yli-Heikkilän (LUKE), Arttu Kivimäen (MML/FGI) ja Matias Heinon (Aalto) toimesta.
~40 Geoportti-geocube-aineistoa, kaikki laskettu uudelleen yhteiseen hilaan useilla eri resoluutioilla.
12 aineistoa FMI:n Tuulituhohaukka STAC -katalogista, mukaan lukien Sentinel-1-, Sentinel-2- ja Landsat-mosaiikit sekä indeksit.

Käyttövinkkejä ja lisätietoa löytyy sivulta Paituli STAC.

Nämä aineistot ovat julkisia, joten kuka tahansa voi ladata niitä myös omalta tietokoneeltaan tai muista palveluista; pääsyä Roihuun ei tarvita.

Lisenssi ja viittauskäytäntö

Yleisesti ottaen kaikilla aineistoilla on avoin lisenssi, mutta tarkat ehdot vaihtelevat hieman; useimmiten käytössä on CC-BY-4.0-lisenssi. Tarkista lisätiedot README-tiedostoista.

Mainitse julkaisuissasi lisenssiehtojen mukaisesti datan tuottaja sekä CSC ja Geoportti; tämä on tärkeää projektin jatkuvuuden ja rahoitusraportoinnin kannalta. Jos käytät Altaassa tarjottua dataa, mainitse myös datan jakava henkilö. Esimerkiksi voit kirjoittaa: "The authors wish to thank CSC - IT Center for Science, Finland (urn:nbn:fi:research-infras-2016072531) and the Open Geospatial Information Infrastructure for Research (Geoportti, urn:nbn:fi:research-infras-2016072513) for data provision".