This is an old revision of the document!
Użytkownicy klastra Eden mają możliwość przechowywania swoich danych w kilku różnych miejscach. W zależności od swoich potrzeb i rodzaju przechowywanych danych należy wybrać najlepsze dla siebie miejsce.
Podstawowym miejscem składowania danych jest katalog /home2/<grupa>/<login>
. Katalog ten jest punktem montowania petabajtowej macierzy DDN złożonej z dysków HDD. Jest on uwspólniony na wszystkich hostach dgx-[1-4]
oraz na hoście dostępowym eden
. Jest to standardowe miejsce składowania danych wykorzystywanych podczas obliczeń, które dzięki temu, że jest widoczne na każdym z komputerów jest bardzo wygodne.
Średnia prędkość zapisu | ||
---|---|---|
1 plik rozmiaru 1 GiB | 669,2 | MiB/s |
1000 plików rozmiaru 512 B | 721,4 | kiB/s |
Każdy z dgx-ów posiada 4 dyski NVME złączone w jeden wolumin logiczny RAID 0. Wolumin ten na dgx-ach jest dostępny pod ścieżką /raid
oraz dodatkowo jest eksportowany poprzez NFS do hosta dostępowego eden
, gdzie widoczny jest pod ścieżką: /mnt/workspace/dgx-[1-4]
. Przestrzeń ta nie jest uwspólniona. Każdy DGX “widzi” tylko swoje własne dyski. Użytkownik jest samodzielnie odpowiedzialny za ewentualną synchronizację zawartości tych dysków o ile jego zadanie wymaga takowej do realizacji. Zaletą korzystania z tych dysków jest istotnie większa prędkość w porównaniu do katalogów domowych. Zaleca się korzystanie z tej przestrzeni gdy zadanie realizuje dużą liczbę operacji dyskowych i wydajność magazynu danych może stać się “wąskim gardłem”. Jest to również dobre miejsce do zapisu danych cząstkowych w zadaniach nie wymagających synchronizacji pomiędzy węzłami.
Średnia prędkość zapisu | ||
---|---|---|
1 plik rozmiaru 1 GiB | 1,3 | GiB/s |
1000 plików rozmiaru 512 B | 4,1 | MiB/s |