Hyppää sisältöön

Welcome to our weekly research support coffee hour on Zoom! Click here for more information.

Warning!

Puhti scratch disk is becoming very full (80+ % ) resulting in performance degradation. Everybody is advised to only keep actively processed data on scratch, all other data should be deleted, transferred to host institute or stored in Lumi-O. No new quota will be granted. Click here for a tool for examining your disk usage.

Yleiset käyttötapaukset

Tallennustila CSC:n laskentaprojekteille

CSC:n supertietokoneet tarjoavat levy-ympäristöjä suurten aineistojen käsittelyyn. Näitä tallennusalueita ei kuitenkaan ole tarkoitettu sellaisen datan säilyttämiseen, jota ei käytetä aktiivisesti. Passiivinen data tulee siirtää Altaaseen. Katso lisätietoja Allas HPC -oppaasta.

Datan jakaminen

Datan, esimerkiksi aineistojen tai tutkimustulosten, jakaminen on helppoa oliotallennuksessa. Voit jakaa niitä joko rajatulle yleisölle, esimerkiksi muille projekteille, tai sallia pääsyn kaikille tekemällä datasta julkista.

Dataan voidaan päästä käsiksi ja sitä voidaan jakaa monin eri tavoin:

  • Yksityinen – oletus: Oletuksena, jos et määritä muuta, ämpäreiden sisältöön pääsevät käsiksi vain projektisi tunnistautuneet jäsenet. Yksityinen/Julkinen-asetuksia voidaan hallita seuraavilla tavoilla:

  • Pääsynhallintalistat: Pääsynhallintalistat (ACL:t) toimivat ämpäritasolla, eivät objekteilla. ACL:ien avulla voit jakaa dataasi rajatusti muille projekteille. Voit esimerkiksi myöntää yhteistyöprojektille tunnistautuneen lukuoikeuden aineistoihisi. Katso esimerkki datan jakamisesta toiselle CSC-projektille.

  • Väliaikaiset allekirjoitetut linkit voidaan luoda s3cmd:llä . Tällaisia linkkejä voidaan käyttää tilanteissa, joissa dataan täytyy päästä käsiksi internetin kautta ilman tunnuksia, mutta sen ei ole tarkoitus pysyä julkisesti saatavilla.

  • Julkinen: Voit myös käyttää ACL:iä, jotka myöntävät datalle julkisen lukuoikeuden. Tämä on hyödyllistä esimerkiksi julkisten tieteellisten tulosten tai julkisten aineistojen pysyvään jakamiseen.

Staattisen verkkosisällön julkaiseminen

Yleinen tapa käyttää oliotallennusta on tallentaa staattista verkkosisältöä, kuten kuvia, videoita, ääntä, PDF-tiedostoja tai muuta ladattavaa sisältöä, ja lisätä siihen linkkejä verkkosivulle, joka voi toimia joko Altaassa tai jossain muualla, kuten tässä esimerkissä.

Julkaistaksesi sisältöä siirrä se ensin Allas-asiakasohjelmalla Altaaseen ja tee tiedostoista julkisia.

Datan tallentaminen hajautettua käyttöä varten

On useita tilanteita, joissa dataan täytyy päästä käsiksi useissa sijainneissa. Näissä tapauksissa voidaan käyttää käytäntöä, jossa data vaiheistetaan yksittäisille palvelimille tai tietokoneille oliotallennuksesta jaetun tiedostotallennuksen sijaan.

Saman datan käyttäminen useiden CSC-alustojen kautta

Koska oliotallennuksessa oleva data on saatavilla kaikkialla, voit käyttää sitä sekä CSC:n supertietokoneilla että pilvipalveluissa. Tämä tekee oliotallennuksesta hyvän paikan datan sekä väli- ja lopputulosten säilyttämiseen tilanteissa, joissa työnkulku edellyttää esimerkiksi sekä cPoutan että Puhdin käyttöä.

Datan kerääminen eri lähteistä

Dataa on helppo siirtää oliotallennukseen useista eri lähteistä. Tämä data voidaan myöhemmin käsitellä tarpeen mukaan.

Esimerkiksi useat datankerääjät voivat siirtää käsiteltävää dataa, kuten tieteelliset instrumentit, mittarit tai ohjelmistot, jotka keräävät sosiaalisen median virtoja tieteellistä analyysiä varten. Ne voivat siirtää datansa oliotallennukseen, ja myöhemmin virtuaalikoneet ja laskentatyöt Puhdissa voivat käsitellä datan.

Datan omatoimiset varmuuskopiot

Oliotallennusta käytetään myös usein varmuuskopioiden tallennuspaikkana. Se on kätevä paikka siirtää tietokantavedosten kopioita.

allas-backup on osa a-commands-työkaluja. Se toimii työkaluna tiedostojen varmuuskopioiden luomiseen Altaassa.

Note

Allas-backup ei ole varsinainen varmuuskopiointipalvelu. Se vain kopioi datan toiseen ämpäriin Altaassa, jonka kuka tahansa tunnistautunut käyttäjä voi helposti poistaa tai ylikirjoittaa.

Suomenkielinen tekoälykäännös

Sisällössä voi esiintyä virheellistä tietoa tekoälykäännöksestä johtuen.

Klikkaa tästä antaaksesi palautetta