Pour gérer vos consentements :
Categories: Solutions HPC

Omnia : un projet open source qui marie Slurm et Kubernetes

Qu’est-ce qu’Omnia ? Une « boîte à outils open source destinée à déployer et à gérer des clusters haute performance pour le HPC, l’IA et l’analytics. » C’est en tout cas la définition qui figure sur le GitHub du projet. Ce dernier n’est pas nouveau : le premier commit remonte à février 2020. Mais Dell, qui en est le principal porteur*, vient d’accentuer sa communication.

Omnia repose sur une collection de playbooks Ansible. La promesse : constituer une infrastructure convergée. Le moyen : automatiser le déploiement de clusters Slurm et/ou Kubernetes. Ainsi que d’outils additionnels comme JupyterHub et Kubeflow.

Deux solutions pour exploiter Omnia. D’un côté, l’installation en ligne de commande sur des serveurs Linux. De l’autre, une appliance pour « partir de zéro ».

Dans le deuxième cas (illustré ci-dessous), l’initialisation des serveurs se fait avec l’outil Cobbler et une image « minimale » de CentOS (7.9 2009 au minimum ; SELinux doit être désactivé). Deux topologies réseau sont possibles : plate (tous les nœuds connectés à Internet via un switch) ou hiérarchique (nœuds de calcul connectés à un switch ; nœud gestionnaire connecté à Internet).

Un autre projet open source a inspiré à Omnia ses lignes directrices. En l’occurrence, Pravega. Il s’agit d’un service de messagerie distribuée inscrit dans la lignée de Kafka et de Pulsar.

* Au départ, la démarche visait la communauté Dell HPC, sur la base des serveurs PowerEdge. Le projet en conserve des traces. Par exemple au niveau du nom par défaut de l’organisation sur Ansible : Dell EMC. Le groupe américain précise n’assurer la prise en charge que des modules qu’il a lui-même développés.

Illustration principale © Markus Spiske – Unsplash

Recent Posts

GenAI : le Royaume-Uni poursuit ses investigations sur les partenariats de Microsoft et Amazon

L'Autorité de la concurrence et des marchés (CMA) a lancé la phase de recherche de…

10 heures ago

Clients de VMware : les raisons de la colère

Broadcom remplace pas moins de 168 logiciels VMware par deux grandes licences de location correspondant…

11 heures ago

Laurent Carlier – BNP Paribas Global Market : « L’IA permet de modéliser des relations plus complexes, mais il faut rester prudent »

La banque d’investissement de BNP Paribas utilise l'IA pour proposer des stratégies d’investissement individualisées, en…

12 heures ago

Open Compute Project : les datacenters partagent des bonnes pratiques pour l’environnement

OVHCloud partage ses efforts environnementaux au sommet de l’Open Compute Project qui se tient à…

1 jour ago

Phi-3-mini : Microsoft lance son premier SLM

Avec Phi-3-mini, Microsoft lance un SLM conçu pour attirer une clientèle disposant de ressources financières…

1 jour ago

Apple : l’UE serait prête à approuver son plan pour ouvrir l’accès NFC

La Commission européenne serait sur le point d'approuver la proposition d'Apple visant à fournir à…

1 jour ago