#129 HPC à la demande
Subscribe to get the latest
on 2023-03-21 00:00:00 +0000
with Darren W Pulsipher, Alan Chalker,
Dans cet épisode, Darren interviewe Alan Chalker, directeur des programmes stratégiques chez Ohio Super Computer Center, à propos d'Open OnDemand pour les clusters HPC dans le monde entier.
Keywords
#datamanagement #hpc #data #technology
Dans cet épisode de podcast, Darren Pulsipher, l’architecte principal des solutions du secteur public chez Intel, interviewe Alan Chalker du Ohio Supercomputer Center sur la manière de surmonter les obstacles au calcul haute performance (HPC). Alan est le directeur des programmes stratégiques au Ohio Supercomputer et travaille depuis plus d’une décennie sur un projet financé par la NSF appelé Open OnDemand. Le projet vise à rendre le HPC plus accessible aux consommateurs en général qui sont habitués à effectuer des activités en ligne, comme la banque en ligne et les achats en ligne. Open OnDemand simplifie le processus d’utilisation du HPC en éliminant le besoin de saisir des commandes en ligne de commande. L’expérience d’Alan comprend l’obtention de sa licence en génie électrique et informatique à l’Ohio State University, puis l’obtention de son doctorat en ingénierie biomédicale de l’USC Chapel Hill.
Histoire d’Open OnDemand
En 2006 et 2007, une interface web a été développée en collaboration avec quelques techniciens et l’Edison Welding Institute, qui l’a ensuite nommée Open OnDemand. Elle a commencé comme une simulation en ligne pour le soudage, puis s’est étendue pour inclure une simulation pour les polymères et une autre à usage général. Lors de sa présentation lors de différentes conférences, d’autres institutions de recherche en informatique ont exprimé leur intérêt pour sa mise en place sur leurs systèmes. Pour en faire un logiciel open source, la National Science Foundation leur a accordé un programme de trois ans d’une valeur de 300 000 dollars, ce qui a rendu le prototype plus robuste. Le succès d’Open OnDemand a ensuite donné lieu à un autre programme de cinq ans d’une valeur de 3 millions de dollars. Aujourd’hui, il est déployé sur tous les continents, à l’exception de l’Antarctique, et sert plus de 400 institutions de recherche en informatique.
Expansion de l’influence du calcul haute performance (HPC)
Les supercalculateurs se sont étendus au-delà des domaines traditionnels tels que l’informatique et l’ingénierie. À l’OSC, les étudiants en anthropologie et en sciences politiques utilisent le supercalculateur pour leurs recherches, ainsi que les étudiants en horticulture et en agronomie. La demande pour le supercalculateur augmente, avec plus de 8 500 personnes utilisant les supercalculateurs de l’OSC du monde entier au cours de l’exercice financier dernier. De plus, pendant la pandémie, de nombreuses universités ont pu continuer à enseigner et à faire de la recherche à distance grâce aux postes de travail virtuels fournis par le supercalculateur.
Comparaison des modèles tarifaires CSP et HPC
Les modèles de tarification pour le superordinateur sont basés sur les heures de calcul et les mois de téraoctets, et le mandat gouvernemental permet des prix subventionnés pour les entités académiques basées dans l’Ohio. Les fournisseurs de services cloud facturent en fonction du temps écoulé, pas des heures de calcul, et en fonction du stockage des données et des coûts de réseau de sortie. Les clients de l’industrie commerciale commencent à utiliser des superordinateurs pour les charges de travail de simulation HPC traditionnelles, ce qui leur permet d’économiser de l’argent par rapport à leur exécution dans des clouds publics de détail.
Exemples d’utilisation commerciale
Le jour précédant le moment où Darren et Alan se sont assis et ont discuté, des tornades se sont produites dans la région de Columbus, Ohio. Les prévisions météorologiques sont importantes pour de nombreuses industries, et les supercalculateurs sont bien adaptés à cette tâche. Le centre génère des prévisions météorologiques toutes les 4 à 6 heures pour des clients tels que des compagnies d’expédition et des compagnies aériennes. Bien que les charges de travail de calcul haute performance traditionnelles soient encore courantes, de nouvelles émergentes comprennent l’analyse des tweets des membres du Congrès par rapport à la COVID-19, l’anthropologie, l’horticulture et les sciences des cultures. Tout ce qui est limité dans le temps ou implique trop de données peut bénéficier des capacités de calcul haute performance. La demande pour ces capacités devrait augmenter en raison d’une accessibilité accrue. Rendre la consommation de calcul haute performance plus facile est similaire à ce que le cloud a fait pour le calcul en grille à l’époque.
Capacité OSC
La capacité impressionnante du système informatique haute performance de l’OSC se développe constamment pour répondre à la demande. Au moment de l’enregistrement, ils disposaient de 55 000 cœurs, principalement de la marque Intel, avec 400 accélératrices réparties sur 1600 nœuds. Ils prévoient une nouvelle acquisition qui leur permettrait d’atteindre de 75 000 à 80 000 sièges en raison de la demande croissante dans les domaines biomédicaux. Le système peut gérer de grandes quantités de données, avec une capacité de stockage réel de 20 pétaoctets et une connectivité réseau atteignant une vitesse de lecture/écriture de 350 gigabits par seconde. Un des avantages significatifs de l’OSC est l’absence de frais de sortie pour leurs clients grâce à la fondation de l’organisation par le biais d’une subvention de la National Science Foundation.
Ouvrez OnDemand
De nombreuses universités et centres de calcul à haute performance (HPC) utilisent Open OnDemand comme une interface web simple pour rendre l’HPC plus accessible aux chercheurs qui ont besoin d’apprendre ou de comprendre les complexités de la planification des tâches, de la décomposition des ensembles de problèmes et de la gestion des données sur un cluster. Même les fournisseurs de services cloud ont des interfaces Open OnDemand pour leurs offres HPC.