Bon usage du CBP

Nous sommes de plus en plus nombreux à utiliser le CBP et il est important de prendre de bonnes habitudes de connexion pour éviter d'affecter l'ensemble du CBP et donc d'impacter les autres utilisateurs. Voici quelques éléments utiles.

Utilisation des différents espaces

/local — 120 To — Idéal pour le travail temporaire et les gros volumes de données

(+) Pas de latence réseau, I/O rapides

(-) Archivage mais pas de sauvegarde

/projets — 123 To, 85 To libres — Idéal pour le travail collaboratif

(+) Partage entre membres d'un projet ou d'une équipe

(+) Pas de durée limite

(-) Archivage et sauvegarde

(-) Pas conçu pour du I/O intensif

/scratch — Accès rapide pour tâches temporaires (ex : application MPI)

(+) Accès rapide pour tâches temporaires

(-) Archivage mais pas de sauvegarde

/home — 20 Go — Espace personnel, sauvegardé

(+) Utiliser uniquement pour les petites données ou configurations personnelles

(-) Archivage et sauvegarde

L'idéal est de créer un espace projet et de travailler dans cet espace.

Création de l'espace projet via le formulaire du CBP. Pour créer un projet, vous aurez besoin d'un acronyme, d'une description et d'une illustration.
Les espaces /local et /scratch sont comme des paillasses : on ne s'y installe pas si un groupe travaille déjà dessus, et on les libère quand on n'en a plus besoin.
La commande pour savoir si des personnes travaillent sur une machine est : ListUsersHost
Sur certaines machines il n'y a pas de /local mais /localSSD ou /localHDD ; vérifier avec df -h.

Monitorer son activité

Surveiller les ressources système (CPU, mémoire, GPU) sur un serveur est essentiel pour garantir sa stabilité, ses performances et une utilisation optimale.

Les commandes à connaître sont :

htop et dstat : permettent de détecter en temps réel des surcharges CPU, des fuites mémoire, ou des processus anormalement gourmands.
nvidia-smi dmon et nvtop : indispensables pour surveiller l'utilisation des GPU, leur température, leur mémoire et les processus actifs.

Vérifier la disponibilité GPU :

import torch

print(torch.cuda.is_available())
print(torch.cuda.device_count())
print(torch.cuda.current_device())
print(torch.cuda.device(0))
print(torch.cuda.get_device_name(0))

Pytorch

Il faut déployer un Pytorch avec Cuda13 sur les RTX 5090, donc sur anchiale11, anchiale17, anchiale20 et anchiale21.

pip install torch torchvision --index-url https://download.pytorch.org/whl/rocm6.4

Machines CBP

Compte bloqué

Si votre compte est bloqué, cela signifie qu'un usage inapproprié du CBP a été détecté par Emmanuel Quemener, pouvant compromettre le bon fonctionnement du service pour les autres utilisateurs.

Dans ce cas, une notification aura été envoyée à la personne marraine (directeur de thèse, encadrant post-doctoral, etc.) contenant des éléments permettant d'identifier la cause du blocage.

Vous pourrez alors, ensemble, analyser la situation et comprendre l'action à l'origine du problème avant de contacter Emmanuel Quemener.

Installation Vscode

Tutoriel par Nelly Pustelnik: Page web

Vscode pose des soucis sur le CBP mais il est toujours possible de l'utiliser. Penser néanmoins à bien fermer vos fenêtres interactives lorsque vous ne les utilisez plus.

Installation Pycharm

Tutoriel par Nils Laurent : Page web