Differences

This shows you the differences between two versions of the page.

--- en:hpc [2022/04/20 07:12] – [Connection] grikiete
+++ en:hpc [2022/07/04 08:36] – [Batch Processing of Tasks (SLURM)] grikiete
@@ Line 72: / Line 72: @@
 If **Kerberos** is used:
-  * Log in to the Linux environment in a VU MIF classroom or public terminal with your VU MIF username and password;
+  * Log in to the Linux environment in a VU MIF classroom or public terminal with your VU MIF username and password or login to **uosis.mif.vu.lt** with your VU MIF username and password using **ssh** or **putty**.
-  * or login to **uosis.mif.vu.lt** with your VU MIF username and password using ssh or putty.
   * Check if you have a valid Kerberos key (ticket) with the **klist** command. If the key is not available or has expired, the **kinit** command must be used.
   * Connect to the **hpc** node with the command **ssh hpc** (password must not be required).
-  * The **first time** you log in, you must wait **5 minutes** and then you can start to use HPC.
 If **SSH keys** are used (e.g. if you need to copy big files):
@@ Line 83: / Line 81: @@
   *     Connect with **ssh**, **sftp**, **scp**, **putty**, **winscp** or any other **ssh** protocol supported software to **hpc.mif.vu.lt** with your **ssh private key**, specifying your VU MIF user name. It should not require a login password, but may require your ssh private key password.
-The first time you connect, you **will not** be able to run **SLURM tasks** for the first **5 minutes**. After that, SLURM account will be created.
+The **first time** you connect, you **will not** be able to run **SLURM jobs** for the first **5 minutes**. After that, SLURM account will be created.
+====== Lustre - Shared File System ======
+VU MIF HPC shared file system is available in the directory ''/scratch/lustre''.
+The system creates directory ''/scratch/lustre/home/username'' for each HPC user, where **username** is the HPC username.
+The files in this file system are equally accessible on all compute nodes and on the **hpc** node.
+Please use these directories only for their purpose and clean them up after calculations.
+====== HPC Partition ======
+^Partition ^Time limit ^RAM	   ^Notes|
+^main             ^7d            ^7000MB  ^CPU cluster|
+^gpu              ^48h           ^12000MB ^GPU cluster|
+^power            ^48h           ^2000MB  ^IBM Power9 cluster|
+The time limit for tasks is **2h** in all partitions if it has not been specified. The table shows the maximum time limit.
+The **RAM** column gives the amount of RAM allocated to each reserved **CPU** core.
+====== Batch Processing of Tasks (SLURM) ======
+To use computing resources of the HPC, you need to create task scenarios (sh or csh).
+Example:
+<code shell mpi-test-job.sh>
+#!/bin/bash
+#SBATCH -p main
+#SBATCH -n4
+module load openmpi
+mpicc -o mpi-test mpi-test.c
+mpirun mpi-test
+</code>
+After submission and confirmation of your application to the ITOAC services, you need to create a user at https://hpc.mif.vu.lt/. The created user will be included in the relevant project, which will have a certain amount of resources. In order to use the project resources for calculations, you need to provide your allocation number. Below is an example with the allocation parameter "alloc_xxxx_project" (not applicable for VU MIF users, VU MIF users do not have to specify the --account parameter).
+<code shell mpi-test-job.sh>
+#!/bin/bash
+#SBATCH --account=alloc_xxxx_projektas
+#SBATCH -p main
+#SBATCH -n4
+#SBATCH --time=minutes
+module load openmpi
+mpicc -o mpi-test mpi-test.c
+mpirun mpi-test
+</code>
+Jame kaip specialūs komentarai yra nurodymai užduočių vykdytojui.
+ -p short - į kokią eilę siųsti (main, gpu, power).
+ -n4 - kiek procesorių rezervuoti (**PASTABA:** nustačius naudotinų branduolių skaičių x, tačiau realiai programiškai išnaudojant mažiau, apskaitoje vis tiek bus skaičiuojami visi x "užprašyti" branduoliai, todėl rekomenduojame apsiskaičiuoti iš anksto).
+Užduoties pradinis einamasis katalogas yra dabartinis katalogas (**pwd**) prisijungimo mazge iš kur paleidžiama užduotis, nebent parametru -D pakeistas į kitą. Pradiniam einamajam katalogui naudokite PST bendros failų sistemos katalogus **/scratch/lustre**, nes jis turi egzistuoti skaičiavimo mazge ir ten yra kuriamas užduoties išvesties failas **slurm-JOBID.out**, nebent nukreiptas kitur parametrais -o arba -i (jiems irgi patariama naudoti bendrą failų sistemą).
+Suformuotą scenarijų siunčiame su komanda sbatch
+''$ sbatch mpi-test-job''
+kuri gražina pateiktos užduoties numerį **JOBID**.
+Laukiančios arba vykdomos užduoties būseną galima sužinoti su komanda squeue
+''$ squeue -j JOBID''
+Su komanda scancel galima nutraukti užduoties vykdymą arba išimti ją iš eilės
+''$ scancel JOBID''
+Jeigu neatsimenate savo užduočių **JOBID**, tai galite pasižiūrėti su komanda **squeue**
+''$ squeue''
+Užbaigtų užduočių **squeue** jau neberodo.
+Jeigu nurodytas procesorių kiekis nėra pasiekiamas, tai jūsų užduotis yra įterpiama į eilę. Joje ji bus kol atsilaisvins pakankamas kiekis procesorių arba kol jūs ją pašalinsite su **scancel**.
+Vykdomos užduoties išvestis (**output**) yra įrašoma į failą **slurm-JOBID.out**. Jei nenurodyta kitaip, tai ir klaidų (error) išvestis yra įrašoma į tą patį failą. Failų vardus galima pakeisti su komandos **sbatch** parametrais -o (nurodyti išvesties failą) ir -e (nurodyti klaidų failą).
+Daugiau apie SLURM galimybes galite paskaityti [[https://slurm.schedmd.com/quickstart.html|Quick Start User Guide]].