NetApp punta su pNFS per le fabbriche di intelligenza artificiale

NetApp ha selezionato pNFS come percorso strategico per posizionarsi nel settore delle fabbriche di intelligenza artificiale.

L'azienda ha scelto l'agencement di dati denominato Flex Files, che consente di aggregare server NFS all'interno di un unico spazio dei nomi. Questa soluzione è considerata ideale per la scala delle fabbriche di intelligenza artificiale, poiché permette di evitare il carico di coordinamento che deriva dall'utilizzo di punti di montaggio separati. NetApp ha invece scartato l'opzione del NAS aziendale con architettura a tutto condiviso, principalmente perché non opera la necessaria disaggregazione.

Per quanto riguarda Lustre, l'azienda ha riscontrato che il server di metadati è monolitico. La pratica comune di partizionare lo spazio dei nomi per aumentare la scala non ha convinto NetApp, che ritiene che tale operazione sposti semplicemente il collo di bottiglia. Inoltre, Lustre richiede la manutenzione di un nucleo specifico su ogni nodo, a differenza di pNFS che è integrato nativamente in Linux.

NetApp ha preferito la tecnologia Lattice, recentemente integrata nell'ecosistema pNFS. Lattice, pubblicato in codice aperto con il supporto della Linux Foundation, fornisce un motore di esecuzione nello spazio utente basato su un piano di autorità condiviso tramite un cluster RonDB. Queste caratteristiche facilitano la scalabilità fino a 72 nodi e consentono l'uso di istanze di server di metadati effimere. L'orchestrazione con l'infrastruttura di archiviazione avviene tramite chiamate RPC dirette e il motore implementa attualmente la personalità NFSv4.2/pNFS, con l'obiettivo di diventare una base per altre architetture distribuite.

Il progetto Lattice si è evoluto verso un modello a nucleo aperto con il supporto tecnico del laboratorio di Los Alamos. Sotto l'impulso della start-up PEAK:IO, sono emersi moduli per la ristrutturazione dei dati, la ripartizione ponderata e la gerarchizzazione. NetApp ha acquisito PEAK:IO per integrare queste capacità.

Il sistema Novus dovrebbe fornire una larghezza di banda aggregata superiore a 100 terabyte al secondo, con una scala nell'ordine dello zettaoctet e una scalabilità quasi lineare. Attualmente, i dati devono risiedere su sistemi ONTAP, poiché non esiste ancora un'opzione di archiviazione definita dal software. Il server di metadati è invece eseguito su hardware x86.