Il risparmio di 10 volte di Panasas aumenta NetApp dall’implementazione dello storage HPC

Il Molecular Horizons Institute dell’Università di Wollongong (UoW’s) con sede in Australia, leader mondiale nella microscopia elettronica criogenica, ha distribuito 1,2 PB di Panasas NAS con scalabilità orizzontale supportare calcolo ad alte prestazioni (HPC).

La partnership quinquennale vedrà l’hardware di storage Panasas sostituire le apparecchiature NetApp che hanno raggiunto la fine del ciclo di vita. Ma Panasas è stata scelta anche per il suo supporto e la sua competenza nelle scienze della vita, nonché per costo per TB.

Competenza nella microscopia elettronica criogenica (Cryo-EM) di Molecular Horizons lo vede funzionare con partner in tutto il mondo. Si basa su capacità che consentono ai ricercatori di studiare immagini ad alta risoluzione di campioni congelati di virus, strutture cellulari e proteine.

I set di dati grezzi possono variare da circa 5 TB a 40 TB da apparecchiature di imaging che funzionano per l’80% dell’anno, operando 24 ore su 24, 7 giorni su 7 e scattando tra le 5.000 e le 10.000 immagini dello stesso campione per fornire visualizzazioni ai ricercatori di tutto il mondo.

Ciò equivale a grandi quantità di dati che attualmente raggiungono diverse centinaia di TB, sebbene i partner migrino i propri dati dopo sei mesi sullo storage UoW.

L’infrastruttura di storage di massa di UoW era stata fornita da NetApp. aveva raggiunto fine della vita e UoW stava guardando altrove, ha affermato James Bouwer, direttore di Cryo-EM presso Molecular Horizons.

Panasas disponeva di un’esperienza nelle scienze della vita, ha affermato Bouwer, mentre NetApp no, e aveva un enorme differenziale di costo per TB, con Panasas che offriva 1,2 PB allo stesso prezzo di NetApp offriva 100 TB.

“Per il prezzo che abbiamo pagato – abbiamo esaminato anche NetApp – probabilmente avremmo potuto ottenere 100 TB da quello che abbiamo speso”, ha affermato Bouwer. “Abbiamo 1,2 PB e un partner. Penso che la matematica sia abbastanza chiara”.

“Abbiamo affrontato la prospettiva di non molto supporto da NetApp. Dissero: “Consegniamo il sistema, poi è tuo, abbi cura di lui”. Panasas ha esperienza nelle scienze della vita e abbiamo lavorato a stretto contatto con loro”, ha affermato.

“Panasas ha spedito tutta l’attrezzatura, abbiamo lavorato con loro e l’abbiamo costruita noi stessi a causa del Covid, ma [we’re] supportati a distanza da loro”, ha aggiunto.

Molecular Horizons ha implementato 1.2PB di Panasas ActiveStor archiviazione scalabile, che esegue il file system parallelo PanFS. Fornisce più livelli di archiviazione basati su NVMe allo stato solido e capacità del disco rotante.

Tale distribuzione è attualmente in fase di test, con Panasas che fornisce un grande aiuto nell’architettura di ciò che Bouwer descrive come un “set di flussi di lavoro molto complesso”.

Ha aggiunto: “Non lavoriamo con il dipartimento IT dell’università perché non capiscono cosa facciamo, ma abbiamo un partner che lo fa”.

Quali altri vantaggi si aspetta Molecular Horizons dal passaggio a Panasas? “Avremo un accesso davvero rapido ai file, al livello attivo”, ha affermato Bouwer.

Dynamic Data Acceleration di Panasas ha aggiunto il tiering in base alla dimensione del file al suo PanFS NAS con scalabilità orizzontale l’anno scorso. Si tratta di una mossa volta a fornire ai clienti lo storage adatto a un’ampia varietà di HPC e intelligenza artificiale/apprendimento automatico (AI/ML) carichi di lavoro sfruttando la velocità dell’SSD per file di piccole dimensioni e il throughput ammassato di disco fisso per file di grandi dimensioni.

Dynamic Data Acceleration suddivide i dati in diversi supporti all’interno del sistema di storage, ma non in base alle caratteristiche di utilizzo. La suddivisione in livelli per dimensione del file garantisce un vantaggio prestazionale doppio in termini di GBps rispetto ai rivali del file system BeeGFS, Lustro e IBM GPFS/Scala dello spettro.