Gaussian¶
Gaussian on monipuolinen ohjelmistopaketti, joka tarjoaa erilaisia ominaisuuksia elektronisen rakenteen mallintamiseen.
Saatavuus¶
- Roihu-CPU:
G16RevC.02
Lisenssi¶
CSC on hankkinut Gaussianille täyden kaupallisen lisenssin. Se on kaikkien
hyväksyttyjen käyttäjätilien haltijoiden käytettävissä lisenssirajoitusten
mukaisesti. Gaussianin käyttö CSC:llä edellyttää, että käyttäjätunnuksesi on
lisätty gaussian2-käyttäjäryhmään. Lähetä pyyntö
CSC:n Service Deskille.
Käyttö¶
Gaussian-työt on lähetettävä CPU-kirjautumissolmulta (roihu-cpu.csc.fi).
Alusta Gaussian-ympäristö ja lähetä tavalliset työt subg16-skriptillä:
module load gaussian/G16RevC.02
subg16 hhh:mm:ss jobname <your project id> [local disk GB] [--no-submit]
missä:
hhh:mm:sson pyydetty enimmäisajoaika tunteina, minuutteina ja sekunteina.jobnameon syötetiedoston nimi ilman.com-päätettä.[local disk GB](valinnainen) on pyydetty nopean paikallislevyn koko gigatavuina (katso alla).[--no-submit](valinnainen) luo työtiedoston lähettämättä sitä.
Esimerkkejä:
subg16 05:30:00 h2o <your project id> # basic submission
subg16 05:30:00 h2o <your project id> 10 # with 10 GB fast disk (SBF)
subg16 05:30:00 h2o <your project id> --no-submit # generate the job file without submitting
Ytimien määrä (%NProcShared) ja muisti (%Mem) luetaan suoraan syöte-.com-tiedostosta.
Suorita subg16 ilman argumentteja saadaksesi täydellisen käyttöyhteenvedon.
Partitiot. subg16-skripti valitsee eräajo-osion automaattisesti pyydetyn
enimmäisajoajan perusteella:
| Partition | Maximum wall time |
|---|---|
small |
72 hours (3 days) |
longrun |
240 hours (10 days) |
Muisti. Skripti lisää %Mem-arvosi päälle 1 500 Mt:n ylivaran, kun muistia
varataan Slurmista. Tuettu enimmäisarvo %Mem-asetukselle on rajattu
M-solmun 768 GiB:n ylärajaan. Aseta %Mem hieman pienemmäksi kuin solmun
kokonaismuisti, jotta käyttöjärjestelmälle jää tilaa.
Nopea paikallislevy. Jos levykoko annetaan, subg16 pyytää nopeaa levytilaa
eriytetystä NVMe-tallennuksesta (SBF), joka liitetään polkuun /sbf/data, ja
Gaussianin scratch-tiedostot (GAUSS_SCRDIR) kirjoitetaan sinne. Levy on
olemassa vain työn ajan ja poistetaan työn päättyessä. Ilman levykokoa
scratch-tiedostot kirjoitetaan Lustreen työn hakemistoon, ja skripti asettaa
niille optimoidun stripe-jaon. Pyydä riittävästi levytilaa: scratch-tiedostojen
on mahduttava pyydettyyn kokoon. %Chk-määrityksessä nimetty checkpoint-tiedosto
kirjoitetaan työn hakemistoon, ellei syötetiedostossa anneta täydellistä polkua.
Suorituskykyyn liittyviä huomioita¶
Gaussian-töiden optimaalisen suorituskyvyn saavuttamiseksi CSC:n palvelimilla on hyödyllistä ottaa huomioon joitakin tehokkuuteen liittyviä seikkoja. Joitakin vinkkejä muisti- ja levyvaatimusten arviointiin löytyy täältä. Aiheesta on myös hyvä yhteenveto, jonka tarjoaa NRIS.
Gaussian tarjoaa suuren määrän laskentamalleja, joilla kaikilla on erilaiset suorituskykyominaisuudet käytettävissä olevista resursseista riippuen.
Rinnakkaislaskenta¶
Työlle varattujen ytimien määrä asetetaan syötetiedostossa käyttäen
%NProcShared-lippua.
Yleisesti ottaen optimaalinen ytimien määrä on melko pieni, joten on hyvä
aloittaa muutamalla testiajolla edustavalla työllä käyttäen pientä määrää
ytimiä, kuten %NProcShared=4. Testitulosten perusteella voit määrittää
sopivat resurssit varsinaisia tuotantoajoja varten.
Ytimien määrän kasvattaminen ei aina paranna suorituskykyä, ja se voi jopa heikentää sitä.
Muisti¶
Muistin varaus Gaussianissa hallitaan syötetiedoston %Mem-lipulla, jossa
määritetään laskennalle varattavan muistin kokonaismäärä.
Rinnakkaistöissä Gaussian jakaa muistin useiden ytimien kesken. Koska suuri osa datasta voidaan jakaa säikeiden välillä, muistin käytön riippuvuus ytimien määrästä on vain heikko. Tämä tarkoittaa, että ytimien määrän kasvattaminen ei yleensä edellytä suhteellista muistin lisäystä.
Kokonaismuistitarve riippuu menetelmästä, kantafunktiojoukosta ja ytimien määrästä. Lisätietoja löytyy Gaussianin virallisesta dokumentaatiosta.
On myös joitakin työkaluja, kuten GaussMem, jotka voivat auttaa muistitarpeen arvioinnissa.
Huom
Roihussa tavallisissa CPU-solmuissa (M-solmut) on 768 GiB muistia jaettuna
384 ytimen kesken, mikä tarkoittaa noin 2 GiB per ydin. subg16-skripti
asettaa tämän kovaksi ylärajaksi %Mem-asetukselle. %Mem-arvosi päälle
lisätään automaattisesti 1 500 Mt:n ylivara, kun muistia varataan
Slurmista, joten aseta %Mem sen mukaisesti pysyäksesi solmun rajoissa.
Paikallislevyn käyttö (NVMe)¶
Levy-I/O-intensiivisissä töissä, kuten vahvasti korreloiduissa menetelmissä MP2, CCSD(T) ja ominaisuuslaskennoissa, kuten värähtelytaajuuslaskennoissa, nopea paikallinen NVMe-levy voi parantaa suorituskykyä merkittävästi. Paikallislevyn käyttö tällaisissa töissä vähentää myös Lustre-rinnakkaistiedostojärjestelmän kokonaiskuormaa.
Roihussa nopeaa levyä pyydetään subg16-komennon [local disk GB]-argumentilla,
esimerkiksi subg16 05:30:00 jobname <your project id> 200 pyytää 200 Gt.
Käytä kokoa, joka on suurempi kuin odotettu RWF-tiedoston koko, joka tulostuu
testiajon lopussa ("File lengths").
Optimaalisten resurssien arviointi¶
Ennen laajamittaisten laskentojen suorittamista on tärkeää määrittää laskentaresurssien tehokkain käyttö. Liian suuri ydin- tai muistivaraus voi johtaa resurssien hukkaan ja joissakin tapauksissa jopa hitaampaan suorituskykyyn.
Vaiheittainen lähestymistapa¶
- Aloita pienesti – Aloita testityöllä, jossa käytetään maltillista määrää
ytimiä (esim.
%NProcShared=4). - Seuraa suorituskykyä – Kun työ on valmis, käytä
seff-komentoa tarkistaaksesi CPU-käyttöasteen, muistitehokkuuden ja työn ajoajan. - Kasvata resursseja vähitellen – Kaksinkertaista ytimien määrä vaiheittain (esim. 4 → 8 → 16) ja tarkkaile vaikutusta suorituskykyyn.
- Tunnista tehokkuuden tasaantumispiste – Jos ytimien kaksinkertaistamisesta saatu nopeutuminen jää alle 1,5:n, lisäys ei todennäköisesti ole enää tehokas.
- Huomioi levy- ja muistitarpeet – Jotkin menetelmät (esim. MP2, CCSD(T), taajuuslaskennat) hyötyvät enemmän riittävästä muistista ja nopeasta paikallisesta levystä (NVMe) kuin lisäytimistä. Riittämätön muisti tai hidas levy-I/O voi aiheuttaa pullonkauloja ja huonoa skaalautuvuutta.
Tehokas resurssien kohdentaminen varmistaa nopeammat ajot, minimoi jonotusajat ja välttää tarpeettoman järjestelmäkuorman.
Suorituskykyesimerkki¶
Tässä annamme lyhyen esimerkin siitä, miten erilaiset resurssivaraukset vaikuttavat Gaussianin suorituskykyyn ja mitä tekijöitä tulisi ottaa huomioon. Käytämme syöterakenteena α-Tokoferolia (eräs E-vitamiinin muoto). Syötetiedosto on saatavilla osoitteessa vitamin_e.com.
Alla olevat testit tehtiin Puhdissa ja Mahdissa (nyt poistettu käytöstä) tuotantoympäristössä, jossa töiden välinen häiriö voi aiheuttaa vaihtelua suorituskykyyn. Lisäksi jonkin verran vaihtelua syntyy siitä, miten varatut ytimet sijoittuvat mielivaltaisesti solmun sisällä. Roihun suorituskykyvertailut lisätään, kun ne ovat saatavilla.
Ensin vertaamme b3lyp/cc-pVDZ, %mem=10GB, 10GB NVMe -yksittäispistelaskennan
ajoaikaa ja skaalautuvuutta. Tämä laskenta vaatii vain kohtuullisesti muistia
ja levyresursseja, joten niiden kasvattamisen ei pitäisi vaikuttaa suorituskykyyn.

Tässä nimenomaisessa tapauksessa skaalautuvuus Puhdissa alkaa tasaantua yli 30 ytimen jälkeen, kun taas Mahdissa skaalautuvuus säilyy kohtuullisena noin 80 ytimeen asti.
Jos teemme saman laskennan mutta kasvatamme kantafunktiojoukon kooksi
b3lyp/cc-pVTZ, %mem=10GB, 10GB NVMe -varaus on edelleen riittävä kaikkiin
tarpeisiin.

Tässä suuremmassa laskennassa skaalautuvuus Puhdissa pysyy hyvänä aina täyteen solmuun asti. Mahdissa skaalautuvuus alkaa kuitenkin tasaantua noin 100 ytimen kohdalla.
Aaltotoimintopohjaisessa menetelmässä kuten MP2/cc-pVDZ, %mem=100GB, 200GB NVMe
sekä varatulla muistilla että paikallislevyn (NVMe) käytöllä on merkittävä
vaikutus suorituskykyyn, kuten seuraava kuvaaja osoittaa:

Puhdissa nopeutuminen tasaantuu noin 25 ytimen kohdalla, kun taas Mahdissa suorituskyvyn paraneminen jatkuu noin 35 ytimeen asti.
Testit korostavat riittävän muistin varaamisen tärkeyttä. Lisäksi huomattava suorituskyvyn parannus paikallislevyä (NVMe) käytettäessä verrattuna tavalliseen scratch-levyyn (noin 30 % nopeampi Puhdissa) osoittaa, että paikallislevy on ensisijainen vaihtoehto tämäntyyppisissä laskennoissa silloin, kun se on saatavilla.
Viitteet¶
- Gaussianin viittaamisohje julkaisuihisi.
Lisätietoja¶
- Gaussianin verkkokäyttöohje
- Gaussian-töiden ajaminen HyperQueuella
- Ohje: Avogadro2:n käyttö Gaussianin ja ORCAn kanssa