¶ Na skróty
Wejdź na stronę https://hpc-info.kdm.wcss.pl, aby sprawdzić:
- stopień wykorzystania swoich usług obliczeniowych
- wykorzystanie CPU, GPU, pamięci dyskowej i RAM przez zadania SLURM
¶ HPC Info
Strona internetowa serwisu HPC Info: https://hpc-info.kdm.wcss.pl
Serwis HPC Info służy do monitorowania zużycia zasobów obliczeniowych przez użytkowników superkomputera w ramach usługi "Przetwórz na superkomputerze".
Użytkownicy serwisu mają wygodny dostęp do takich informacji jak:
- zużycia godzin obliczeniowych CPU i GPU przez swoje zadania;
- pozostałej ilości zasobów obliczeniowych usług, do których przynależy użytkownik;
- szczegółowego wykorzystania zasobów komputerowych przez zadania, takich jak procentowe wykorzystanie poszczególnych rdzeni CPU czy kart GPU w czasie;
- szczegółowej informacji na temat wykorzystania ich usług przez użytkowników (wyłącznie dla właścicieli usług).
Dane udostępniane są za pomocą serwisu Grafana w formie anglojęzycznych paneli (ang. dashboard) , które pozwalają w sposób interaktywny przeglądać zgromadzone dane. Dodatkowo, po wybraniu odpowiedniego wykresu istnieje możliwość eksportu prezentowanych na nim danych do formatu CSV.
Na podstawie udostępnionych informacji za pomocą serwisu HPC Info, właściciele usług powinni samodzielnie kontrolować sposób wykorzystania ich usług przez użytkowników. Zgromadzone informacje będą uwzględniane podczas weryfikacji wniosków o nowe usługi (bądź wniosków o zwiększenie zasobów). W przypadku, gdy wykorzystanie zasobów obliczeniowych będzie budziło wątpliwości administratorów (przykładowo, duża część zasobów o błędnie zakończonych statusach zadań takich jak CANCELLED, TIMEOUT lub OUT OF MEMORY), może dojść do niezaakceptowania wniosku w pierwotnie złożonej postaci.
¶ Logowanie
Dostęp sieciowy
Dostęp do strony https://hpc-info.kdm.wcss.pl możliwy jest wyłącznie z poziomu sieci Politechniki Wrocławskiej lub z wykorzystaniem VPN-KDM.
Do serwisu można zalogować się wyłącznie za pomocą konta E-SCIENCE.PL po uprzednim kliknięciu w przycisk Sign in with E-SCIENCE.PL (zaznaczony czerwonym prostokątem na poniższym obrazku):
¶ Nawigacja
Użytkownik ma dostęp do kilku paneli opisanych w poniższej tabeli. Wykresy i wskaźniki zostały uzupełnione o proste opisy, które mogą zostać wyświetlone po najechanu na ikonkę (i) znajdującą się obok nazwy wykresu. Format wykresów nie jest modyfikowalny, a użytkownicy nie mają wglądu do danych innych użytkowników.
W przypadku paneli HPC Services Usage [for Users] oraz HPC Services Panel [for Managers], dane zbierane są od 07.08.2024, z wyjątkiem całkowitego zużycia zasobów przez usługę, które odpowiada danym zwracanym przez komendę service-balance. Na życzenie właścieli usług, możliwe jest zestawienie wykorzystania godzin obliczeniowych przez użytkowników we wcześniejszych okresach czasu (kontakt za pomocą helpdesk@e-science.pl).
¶ Strona tytułowa
Po zalogowaniu wyświetli się strona tytułowa z głównym panelem użytkownika HPC Services Usage [for Users] (opis w poniższej tabeli). Aby przejść do innych udostępnionych paneli, można użyć nawigacji znajdującej się u góry ekranu nad obecnym panelem i przejść do Dashboards > Public:
¶ Filtry i wybór zakresu dat
W panelach są dostępne wybrane filtry pozwalające wybierać zestaw danych i redukować nadmiar informacji. Ponadto, w prawym górnym rogu znajduje się przycisk rozwijanego menu do wyboru zakresu dat, który wpływa jedynie na wybrane wykresy o niezablokowanym zakresie dat:
Wykresy, przy których widnieje niebieski napis, taki jak Last 4 years, pokazują sumaryczne dane uwzględniające zadany i niemodyfikowalny zakres czasowy.
¶ Dostępne panele
¶ Charakterystyka
- Dostęp do danych: użytkownik ma dostęp jedynie do swoich danych
- Czas retencji danych: 31 dni
- Częstotliwość zbierania danych: ~15 sekund
¶ Filtry
- SLURM JOB ID - numer zadania użytkownika, dla którego mają zostać informacje na temat wykorzystania zasobów obliczeniowych; domyślnie
All(wszystkie zadania w danym przedziale czasowym)
¶ Opis
Panel zawierający szczegółowe informacje o wykorzystaniu zasobów obliczeniowych przez wszystkie zadania użytkownika w czasie, między innymi:
- poziomu wykorzystania rdzeni CPU i kart GPU
- ilość zaalokowanej pamięci podręcznej
- szybkość odczytu i zapisu danych na zasobach dyskowych (w tym na systemach plików Lustre)
¶ Charakterystyka
- Dostęp do danych: użytkownik ma dostęp jedynie do swoich danych
- Czas retencji danych: 4 lata
- Częstotliwość zbierania danych: ~15 minut
¶ Filtry
- SERVICE - identyfikator usługi, do której użytkownik posiada dostęp; domyślnie
All(wszystkie usługi, do których użytkownik posiada dostęp) - Δt - rozdzielczość czasowa, dla której agregowane są dane na wybranych wykresach prezentujące dane w czasie. Dostępne wartości: 5m, 15m, 30m, 1h, 6h,12h, 24h; domyślnie
1h(dane agregowane co 1 godzinę)
¶ Opis
Panel z danymi o wykorzystaniu zasobów obliczeniowych przez użytkownika, między innymi:
- ilości pozostałych godzin obliczeniowych dla dostępnych usług
- ilości zlecanych i zakończonych zadań
- sumarycznego zużycia godzin CPU i GPU w ramach każdej dostępnej usługi z podziałem na status zakończonych zadań (COMPLETED, TIMEOUT, OUT OF MEMORY, itp.)
- zajętości katalogu Przestrzeni Dyskowej
¶ Charakterystyka
- Dostęp do danych: właściciel usługi
- Czas retencji danych: 4 lata
- Częstotliwość zbierania danych: ~15 minut
¶ Filtry
- SERVICE MANAGED - identyfikator usługi Właściciela; domyślnie pierwsza posiadana usługa
- USER MANAGED - nazwa użytkownika, dla którego pokazać bardziej dokładne dane na temat zużycia; domyślnie
All(wszyscy użytkownicy liczący w ramach danej zarządzanej usługi) - Δt - rozdzielczość czasowa, dla której agregowane są dane na wybranych wykresach prezentujące dane w czasie. Dostępne wartości: 5m, 15m, 30m, 1h, 6h,12h, 24h; domyślnie
1h(dane agregowane co 1 godzinę)
¶ Opis
Panel z danymi o wykorzystaniu zasobów obliczeniowych przez wszystkich użytkowników usługi. Między innymi, właściciel usługi ma wgląd do:
- ilości pozostałych zasobów obliczeniowych dla usługi
- ilości zlecanych i zakończonych zadań przez użytkowników usługi
- sumarycznego zużycia CPU i GPU godzin przez użytkowników usługi z podziałem na status zakończonych zadań (COMPLETED, TIMEOUT, OUT OF MEMORY, itp.)
- wykorzystanie katalogu Przestrzeni Dyskowej przez użytkowników usługi
¶ Powiązane strony
- Rejestr zużycia zasobów - informacje na temat zasad działania rejestru zużycia zasobów przez usługi