Hyppää sisältöön

A new version of SD Connect and SD Desktop will be available from Monday, September 28. The major upgrade will introduce significant improvements, but also includes changes that are not compatible with the current version of the service. Click here to review the available support materials.

Warning!

Puhti and Mahti computing services have been decommissioned and no new jobs are accepted or executed on its compute nodes. Puhti and Mahti login nodes and storage services are planned to remain available until 15 October 2026. Clean up unnecessary files and move any data you need to keep by 31 August 2026. See the Roihu data migration guide for instructions on transferring your data to Roihu.

Roihu-supertietokone

Huomio

Tämä sivu sisältää tietoa CSC:n seuraavasta kansallisesta supertietokoneesta Roihusta, joka on nyt tutkijoiden käytettävissä.

Osana siirtymää Mahti ja Puhti poistetaan käytöstä vaiheittain kesän ja syksyn 2026 aikana. Katso Mahtin ja Puhdin alasajon aikataulu alta.

Aikataulu

graph LR;
    A{{"<b>September 2025</b>
        Roihu installation
        in progress"}} --> B;
    B{{"<b>April 2026</b>
        Pilot phase
        starts"}} --> C;
    C{{"<b>June 2026</b>
        Roihu general
        availability (GA)"}} --> D;
    D{{"<b>End of July 2026</b>
        Puhti <i>computing
        services</i> shut down"}} --> E;
    E{{"<b>End of August 2026</b>
        Mahti <i>computing
        services</i> shut down"}} --> F;
    F{{"<b>Mid October 2026</b>
        Puhti <i>storage
        services</i> shut down"}} --> G;
    G{{"<b>Mid October 2026</b>
        Mahti <i>storage services</i>
        shut down"}}
    style A fill:#dceeceff;
    style B fill:#dceeceff;
    style C fill:#dceeceff;
    style D fill:#dceeceff;
    style E fill:#dceeceff;

Roihu asennetaan samaan datakeskukseen kuin LUMI, mikä tarkoittaa, että järjestelmä voidaan ottaa käyttöön ilman, että Puhdin ja Mahdin palvelut häiriintyvät. Lisäksi Roihun yleisen saatavuuden ja Puhdin sekä Mahdin käytöstäpoiston väliin jää siirtymäaika, jotta käyttäjät voivat siirtyä Roihuun ilman katkosta HPC-resurssien käytössä.

Puhti poistetaan käytöstä kahdessa vaiheessa: ensin Puhdin laskentapalvelut suljettiin 31.7.2026 klo 12.00 EEST. Tämä tarkoittaa, että työt eivät enää ajaudu Puhdin laskentasolmuilla. Puhdin tallennus- ja kirjautumissolmut ovat kuitenkin käytettävissä 15.10.2026 keskipäivään asti, minkä jälkeen Puhti poistuu kokonaan käytöstä.

Mahti suljetaan vastaavalla kaksivaiheisella tavalla. Mahdin laskentapalvelut suljettiin 31.8.2026 klo 12.00 EEST, eikä töitä enää ajeta Mahdissa. Sen tallennus- ja kirjautumissolmut ovat käytettävissä 15.10.2026 keskipäivään asti, minkä jälkeen Mahti poistuu kokonaan käytöstä.

Syyskuun ja lokakuun 2026 välisenä aikana tallennuspalvelut eivät kuulu palvelusopimusten piiriin. Tämän vuoksi emme voi taata, että ne pysyvät käytettävissä koko tämän ajanjakson ajan. Suosittelemme vahvasti kaikkia käyttäjiä priorisoimaan datansa siirtämisen viipymättä.

Valmistaudu datan siirtämiseen Mahdista ja Puhdista Roihuun

Jos sinulla on dataa, joka täytyy siirtää Puhdista Roihuun, varaudu tekemään se kesän 2026 aikana siten, että siirto valmistuu elokuun loppuun mennessä. Katso Roihun siirto-oppaasta, miten voit siirtää dataa suoraan Mahdista ja Puhdista Roihuun.

Jos et voi siirtää dataa suoraan Mahdista tai Puhdista Roihuun heinäkuun alun ja elokuun lopun välillä, harkitse Allaksen tai LUMI-O:n käyttöä datan lyhytaikaiseen tallennukseen.

Jos sinulla on kysymyksiä tai huolia järjestelmien välisestä datan siirtämisestä, ota yhteyttä CSC:n asiakastukeen, tai osallistu CSC:n viikoittaisille käyttäjätuen kahvitauoille.

Laskenta

Roihussa on yhteensä 486 CPU-solmua ja 132 GPU-solmua. Järjestelmän high-performance LINPACK (HPL) -suorituskyvyn arvioidaan olevan 10,5 PFlop/s CPU-solmuille ja 23,4 PFlop/s GPU-solmuille, jolloin koko järjestelmän yhteenlaskettu HPL-suorituskyky on 33,9 PFlop/s.

CPU-solmuissa on kussakin kaksi 192-ytimistä AMD Turin 9965 -prosessoria, eli yhteensä 186 624 CPU-ydintä. Prosessorit perustuvat AMD Zen 5 -arkkitehtuuriin, joka tukee AVX-512-vektorikäskykantaa. CPU-solmuista 414:ssa on 768 GiB muistia, kun taas lopuissa 72 solmussa on laajennettu 1 536 GiB muisti kussakin.

Jokainen GPU-solmu on varustettu neljällä Nvidia GH200 Grace Hopper -supersirulla. Jokainen GH200-supersiru sisältää yhden Hopper (H100) -GPU:n ja yhden Grace-CPU:n, jossa on 72 ARM-CPU-ydintä ja jotka on yhdistetty erittäin nopealla liitännällä. Jokaisessa GH200-supersirussa on 120 GiB CPU-muistia ja 96 GiB GPU-muistia, mikä tarjoaa yhteensä 480 GiB CPU-muistia solmua kohden. Tämä tarkoittaa yhteensä 528 GPU:ta ja 38 016 CPU-ydintä koko GPU-osiolla.

Järjestelmä tarjoaa myös neljä visualisointisolmua, joissa on kaksi Nvidia L40 -GPU:ta kussakin, sekä neljä suuren muistin CPU-solmua, joissa on 6 TiB muistia ja parempi yksisäikeinen suorituskyky.

Solmut

Solmujen nimet

Alla olevat solmujen nimet kuvaavat Roihun eri solmutyyppejä. Slurmin eräajojonojen osiot ja allokaatiotyypit voivat käyttää eri nimiä. Katso Slurmin osioiden dokumentaatiosta, miten näitä resursseja pyydetään Slurmissa.

Name Number of nodes Compute Cores Memory (GiB) Local disk (TB)
M 414 AMD Turin 9965 2 x 192 cores (x86) @ 2.25 GHz 768 0.96
L 72 AMD Turin 9965 2 x 192 cores (x86) @ 2.25 GHz 1536 0.96
XL 4 AMD Turin 9555 2 x 64 cores (x86) @ 3.20 GHz 6144 15.36
V 4 AMD Turin 9335
Nvidia L40
2 x 32 cores (x86) @ 3.40 GHz
2 x GPUs
384
2 x 48
15.36
GPU 132 Nvidia GH200 4 x 72 cores (ARM)
4 x GPUs
4 x 120
4 x 96
0.96

CPU- ja GPU-solmujen CPU-arkkitehtuurien erojen vuoksi (x86 ja ARM), Roihussa on erilliset kirjautumissolmut CPU- ja GPU-työkuormille: roihu-cpu.csc.fi ja roihu-gpu.csc.fi.

Sen mukaan, kohdistuuko työkuormasi CPU:ille vai GPU:ille, yhdistä sopivaan kirjautumissolmuun ohjelmistoja asentaessasi tai töitä lähettäessäsi. Lisätietoja yhdistämisestä.

Roihun käyttöjärjestelmä on Red Hat Enterprise Linux 9 (RHEL9).

Tallennus

Rinnakkainen tiedostojärjestelmä

Roihussa on kaksi toisistaan riippumatonta flash-pohjaista DDN EXAScaler Lustre -tiedostojärjestelmää – 6,0 PiB:n Scratch-tila ja 0,5 PiB:n tallennusjärjestelmä projektien sovelluksille sekä käyttäjien henkilökohtaisille Home-hakemistoille. Erilliset tiedostojärjestelmät takaavat Home- ja ProjAppl-alueiden hyvän vasteajan myös silloin, kun Scratch on kovassa käytössä.

Roihun Scratch-levy on yli kymmenen kertaa suorituskykyisempi kuin Puhdin Scratch. Tarkemmin sanottuna Roihun Scratchin huippu-I/O-suorituskyvyn odotetaan olevan noin 560 GB/s lukunopeudessa ja 280 GB/s kirjoitusnopeudessa. Home- ja ProjAppl- levyalueiden luku- ja kirjoituskaistojen odotetaan olevan vastaavasti 120 GB/s ja 100 GB/s.

Puhdin tapaan Roihun Scratch-levyltä poistetaan säännöllisesti tiedostoja, joita ei ole käytetty viimeisten 180 päivän aikana, jotta järjestelmään ei kerry passiivista dataa.

Roihu tarjoaa myös erillisen Dataset-levyalueen aktiivisesti käytetyille aineistoille, jotka täytyy jakaa useiden laskentaprojektien kesken. Aineistoprojekti tarjoaa yhteisen levyalueen yhteisille aineistoille polussa /dataset/<dataset-project-id>, mikä auttaa välttämään päällekkäisiä kopioita ja yksinkertaistaa projektien välistä käyttöoikeuksien hallintaa.

Katso lisätietoja Roihun aineistoprojektista.

Paikallisen tallennuksen kapasiteetti

Jokainen Roihun CPU- ja GPU-solmu tarjoaa 960 GB paikallista NVMe-tallennustilaa töiden aikana luotaville väliaikaistiedostoille.

Suuren muistin (XL) ja visualisointi- (VIZ) solmut tarjoavat lisää kapasiteettia ja parempaa suorituskykyä paikallisessa tallennuksessaan, yhteensä 13 TiB paikallista NVMe-tallennustilaa solmua kohden.

Solmukohtaista tallennusta on kahdenlaista. Automaattinen väliaikaistallennus ($TMPDIR) on käytettävissä jokaisessa työssä ilman varausta ja maksutta. Varattava paikallinen scratch ($LOCAL_SCRATCH) on käytettävissä vain XL- ja V-solmuissa, se varataan Slurmin --gres=nvme-valinnalla, ja se kuluttaa laskutusyksiköitä (BUs). Määrät, joita yksittäinen käyttäjä voi käyttää töissään, riippuvat käytetystä järjestelmän osiosta:

Allocation type Available per user Read / Write speeds
R (shared nodes) 20 GiB 5000 / 1400 MB/s
N (full nodes) 600 GiB 5000 / 1400 MB/s
G (GPU nodes) 150 GiB 5000 / 1400 MB/s
Hugemem (XL) nodes 578 GiB 6700 / 4000 MB/s
V (visualization nodes) 14 TiB 6700 / 4000 MB/s

Varattavaa paikallista scratchia ei ole vielä toteutettu visualisointisolmuissa (V). Siihen asti kunnes se on उपलब्धilla, näiden solmujen työt voivat käyttää yllä esitetyn kokoisen $TMPDIR-allokaation.

Kun varattava paikallinen scratch toteutetaan, käyttäjäkohtaisen $TMPDIR:n määrä visualisointisolmuissa pienenee.

Node type Maximum reservable Read / Write speeds
Hugemem (XL) nodes 13 TiB 6700 / 4000 MB/s
V (visualization nodes) 6.5 TiB per user 6700 / 4000 MB/s

Paikallisen scratchin varaamista visualisointisolmuissa ei ole vielä toteutettu; käytä näissä solmuissa $TMPDIR:iä, kunnes tämä ominaisuus lisätään.

Uutena ominaisuutena käyttäjät voivat myös pyytää paikallisia levyosliitoksia keskitetystä nopeiden tallennusresurssien poolista. Tämä nopea tallennuskapasiteetti tarjotaan verkon yli, ja se näkyy Slurm-työn sisältä paikallisena scratch-tallennuksena. Erillisen NVMe-resurssin kokonaiskapasiteetti on 307,2 TB.

Verkko

Roihun verkko perustuu InfiniBand NDR -yhteenliitäntään. Jokainen CPU-solmu on yhdistetty verkkoon yhdellä 200 Gb/s linkillä, kun taas GPU- osiossa solmua kohden on neljä 200 Gb/s linkkiä, yksi kutakin GPU:ta kohti.

Ohjelmistot ja ohjelmointiympäristö

Tavoitteemme on tarjota Roihussa kattava valikoima esiasennettuja HPC-kirjastoja ja tieteellisiä ohjelmistoja samaan tapaan kuin Puhdissa ja Mahdissa. Jotkin vanhemmat ja vähemmän käytetyt ohjelmistopaketit ja versiot voidaan kuitenkin poistaa käytöstä. Huomaa myös, että kaikki Puhdissa ja Mahdissa käännetyt ohjelmistot täytyy todennäköisesti kääntää uudelleen Roihussa. Ohjeet sovellusten asentamiseen löytyvät Roihun käytön aloitusoppaasta

Roihun ohjelmointiympäristö on muuten samankaltainen kuin Mahdissa, mukaan lukien:

  • GNU-kääntäjätyökaluketju
  • AOCC-kääntäjätyökaluketju
  • CUDA ja NVIDIA HPC Software Development Kit (SDK)
  • OpenMPI pääasiallisena MPI-kirjastona

Puhdin ja Mahdin tapaan Roihussa on myös selainkäyttöliittymä helppoon interaktiiviseen käyttöön ja graafisten käyttöliittymien ajamiseen.

Luettelo Roihussa tällä hetkellä tuetuista sovelluksista löytyy sovellussivulta.

Sensitiivisen datan palvelut Roihussa

CSC:n supertietokoneita, mukaan lukien Roihua, ylläpidetään HPC-hallinnan parhaiden käytäntöjen mukaisesti: prosessit suunnitellaan ja dokumentoidaan, järjestelmiä valvotaan jatkuvasti ja tietoturvapäivitykset asennetaan viipymättä. Lisäksi kaikki käyttäjät kirjautuvat sisään kaksivaiheisella tunnistautumisella. Näin ollen nämä ympäristöt ovat oletusarvoisesti varsin turvallisia. CSC ei kuitenkaan voi taata, ettei tietomurron riskiä olisi, sillä uusia tietoturvapoikkeamia ilmenee ajoittain.

Käyttötapauksia varten, jotka vaativat korkeampaa turvallisuustasoa, Roihua kehitetään tukemaan työnkulkuja, jotka edellyttävät tehostettuja kontrollitoimia sensitiivisen ja luottamuksellisen datan käsittelyyn. Roihuun tulee erillisiä ominaisuuksia säänneltyjen datatyönkulkujen tueksi.

Sensitiivisen datan ominaisuudet otetaan käyttöön Roihun alkuvaiheen saatavuuden jälkeen. Sensitiivisen laskentaympäristön pilottikäytön arvioidaan alkavan syksyllä 2026, ja yleinen saatavuus voi seurata vuoden 2027 alussa pilotointivaiheen tuloksista ja kokemuksista riippuen.

Käyttäjän työvuon odotetaan muistuttavan CSC:n nykyistä Sensitive Data Desktopista HPC-työn lähettämiseen perustuvaa mallia, jossa sensitiivisen datan työt lähetetään turvallisesta ympäristöstä (SD Desktop) ja syöte-/tulostedata käsitellään suojattujen datapalvelujen kautta (SD Connect). Työt suoritetaan työkohtaisissa eristetyissä ympäristöissä, joista ei ole pääsyä internetiin eikä Roihun jaetuille levyalueille.

Lue lisää CSC:n sensitiivisen datan palveluista tutkimukselle.

Lisätietoja

Roihu supercomputer – now available for use!

Suomenkielinen tekoälykäännös

Sisällössä voi esiintyä virheellistä tietoa tekoälykäännöksestä johtuen.

Klikkaa tästä antaaksesi palautetta