Glossario

HPC (High Performance Computing)

L'HPC (High Performance Computing) è l'uso di supercomputer e di grandi cluster di computer collegati in rete per eseguire calcoli molto complessi in tempi ridotti. Dividendo un problema in parti risolte in parallelo da migliaia di processori, permette simulazioni e analisi che un computer comune non porterebbe a termine.

Cos’è l’HPC e come funziona

Un sistema HPC è formato da molti nodi di calcolo, ciascuno con processori, memoria e spesso schede grafiche (GPU), collegati da una rete molto veloce. Il lavoro viene diviso in parti che girano contemporaneamente sui diversi nodi, con una tecnica detta calcolo parallelo. Un gestore di code assegna le risorse agli utenti e mette in ordine i lavori da eseguire.

La potenza si misura in FLOPS, cioè operazioni in virgola mobile al secondo. I sistemi più grandi superano il miliardo di miliardi di operazioni al secondo, una soglia detta exascale. La classifica TOP500, aggiornata due volte l’anno, elenca i supercomputer più veloci.

A cosa serve l’HPC

  • Previsioni meteo e studi sul clima.
  • Simulazioni in fisica, chimica e scienza dei materiali.
  • Ricerca farmaceutica e analisi del genoma.
  • Progettazione industriale, dalla fluidodinamica delle auto alle strutture degli edifici.
  • Addestramento dei grandi modelli di deep learning e di machine learning.

HPC, cloud e intelligenza artificiale

L’HPC si trova in centri di ricerca e università, ma è disponibile anche in forma di servizio nel cloud, dove si affittano cluster per il tempo necessario. Le GPU, nate per la grafica, sono ora il componente centrale dei sistemi usati per l’intelligenza artificiale, e la distinzione tra supercalcolo e calcolo per l’IA si sta riducendo.

Differenza tra HPC e un computer normale

Un computer da scrivania esegue pochi calcoli alla volta con pochi processori. Un sistema HPC affronta lo stesso tipo di problema con migliaia di processori coordinati, con memoria e rete progettate per scambiare enormi quantità di dati. Gli algoritmi devono essere scritti per usare il parallelismo, altrimenti i processori in più non servono a nulla. Tutti i sistemi della classifica TOP500 usano Linux come sistema operativo.

HPC in Europa e in Italia

L’Unione europea finanzia l’infrastruttura attraverso l’EuroHPC Joint Undertaking, che ha installato supercomputer in diversi Paesi. In Italia il centro di riferimento è il CINECA di Bologna, che ospita il sistema Leonardo. Università e aziende possono chiedere accesso alle macchine con bandi dedicati.

Come si usa un sistema HPC

Gli utenti non lanciano i programmi direttamente sui nodi. Preparano un lavoro, detto job, e lo inviano a un gestore di code come Slurm, che lo mette in attesa finché le risorse richieste sono libere. Il lavoro gira in modalità batch e scrive i risultati su un’area di archiviazione condivisa. Il software si distribuisce spesso in container, per avere lo stesso ambiente su macchine diverse.

Com’è fatto un cluster HPC

I nodi di calcolo sono collegati da reti a bassissima latenza, come InfiniBand, che permettono ai processi di scambiarsi dati in microsecondi. I dati stanno su un file system parallelo, per esempio Lustre, che distribuisce i file su molti dischi e li rende leggibili da migliaia di nodi insieme. Gli utenti accedono da un nodo di ingresso, dove preparano i lavori e controllano i risultati, mentre il calcolo vero e proprio avviene sui nodi riservati dallo scheduler.

Come si scrive un programma per l’HPC

Un programma tradizionale usa un solo processore. Per usare un cluster si divide il lavoro con librerie come MPI, che permette ai processi di comunicare tra nodi diversi, e con OpenMP, che distribuisce il lavoro sui core di una stessa macchina. Per le schede grafiche si usano ambienti come CUDA. Il guadagno non è mai proporzionale al numero di processori: la legge di Amdahl dice che le parti non parallelizzabili del programma limitano la velocità complessiva. Per questo si misura la scalabilità, cioè di quanto cala il tempo aggiungendo risorse.

Consumi e raffreddamento

Un supercomputer di grandi dimensioni assorbe diversi megawatt, quanto una piccola città. L’energia diventa calore, e il raffreddamento è una voce di costo importante. I sistemi più recenti usano il raffreddamento a liquido, che asporta il calore direttamente dai componenti ed è più efficiente di quello ad aria. L’efficienza di un data center si misura con l’indice PUE, il rapporto tra l’energia totale consumata e quella usata dalle sole apparecchiature informatiche.

L’HPC per le imprese

Le imprese lo usano per le simulazioni che altrimenti richiederebbero prototipi fisici: la fluidodinamica per carrozzerie e turbine, l’analisi strutturale, la progettazione di materiali e farmaci. Chi non ha un cluster proprio può affittarne uno nel cloud per la durata di un progetto, oppure chiedere accesso ai centri pubblici con bandi dedicati. Prima di investire si verifica se il software di simulazione in uso sa lavorare in parallelo, perché molti programmi non traggono vantaggio da un numero elevato di processori.

Dati e archiviazione nei progetti HPC

Una simulazione può produrre terabyte di risultati, e leggere e scrivere i dati può richiedere più tempo del calcolo. I centri distinguono aree diverse: una cartella personale per codici e configurazioni, un’area di lavoro veloce per i dati temporanei e un archivio per la conservazione a lungo termine. Per non perdere ore di calcolo in caso di guasto, i programmi salvano a intervalli regolari lo stato dell’elaborazione, detto checkpoint, da cui poter ripartire. La gestione dei dati va pianificata già nella fase di progetto.

Fonti e approfondimenti