L’économie 10x de Panasas ébranlait NetApp du déploiement du stockage HPC

L’Institut Molecular Horizons de l’Université de Wollongong (UoW), basé en Australie, un leader mondial de la microscopie électronique cryogénique, a déployé 1,2 Po de NAS scale-out Panasas pour prendre en charge le calcul haute performance (HPC).

Le partenariat de cinq ans verra le matériel de stockage Panasas remplacer l’équipement NetApp qui était arrivé en fin de vie. Mais Panasas a également été choisi pour son soutien et son expertise dans les sciences de la vie ainsi que pour son coût par tuberculose.

L’expertise de Molecular Horizons en microscopie électronique cryogénique (Cryo-EM) le voit travailler avec des partenaires du monde entier. Il est basé sur des capacités qui permettent aux chercheurs d’étudier l’imagerie haute résolution d’échantillons congelés de virus, de structures cellulaires et de protéines.

Les ensembles de données brutes peuvent aller d’environ 5 To à 40 To à partir d’équipements d’imagerie qui fonctionnent pendant 80 % de l’année, fonctionnant 24 h 24 et 7 h 7 et prenant entre 5 000 et 10 000 images du même échantillon pour fournir des visualisations aux chercheurs du monde entier.

Cela équivaut à de grands fonds de données qui s’exécutent actuellement à plusieurs centaines de To, bien que les partenaires migrent leurs propres données après six mois sur le stockage UoW.

L’infrastructure de stockage en vrac d’UoW avait été fournie par NetApp. Il avait atteint la fin de vie et UoW cherchait ailleurs, a déclaré James Bouwer, directeur de Cryo-EM chez Molecular Horizons.

Panasas avait déjà une expertise en sciences de la vie, a déclaré Bouwer, alors que NetApp ne l’avait pas fait, et avait un différentiel de coût par To massif, Panasas offrant 1.2PB pour le même prix que NetApp offert 100TB.

« Pour le prix que nous avons payé – nous avons également regardé NetApp – nous aurions probablement pu obtenir 100 To de ce que nous avons dépensé », a déclaré Bouwer. « Nous avons obtenu 1.2PB et un partenaire. Je pense que les calculs sont assez clairs.

« Nous avons dû faire face à la perspective d’un peu de soutien de la part de NetApp. Ils ont dit: « Nous allons livrer le système, puis c’est à vous, prenez-en soin ». Panasas possède une expertise dans les sciences de la vie et nous avons travaillé en étroite collaboration avec eux », a-t-il déclaré.

« Panasas a expédié tout le matériel, nous avons travaillé avec eux, et nous l’avons construit nous-mêmes à cause de Covid, mais [we’re] soutenu à distance par eux », a-t-il ajouté.

Molecular Horizons a déployé 1,2 Po de stockage avec montée en puissance parallèle Panasas ActiveStor, qui exécute le système de fichiers parallèle PanFS. Il fournit plusieurs niveaux de stockage basés sur l’état solide NVMe et la capacité du disque tournant.

Ce déploiement est actuellement en phase de test, Panasas fournissant une grande aide dans l’architecture de ce que Bouwer décrit comme un « ensemble très complexe de flux de travail ».

Il a ajouté: « Nous ne travaillons pas avec le département informatique de l’université parce qu’ils ne comprennent pas ce que nous faisons, mais nous avons un partenaire qui le fait. »

Quels autres avantages Molecular Horizons attend-il de déménager à Panasas? « Nous allons avoir un accès très rapide aux fichiers, à la couche active », a déclaré Bouwer.

Dynamic Data Acceleration de Panasas a ajouté la hiérarchisation basée sur la taille du fichier à son NAS scale-out PanFS l’année dernière. Il s’agit d’une initiative visant à fournir aux clients un stockage adapté à une grande variété de charges de travail HPC et d’intelligence artificielle / apprentissage automatique (AI / ML) en exploitant la vitesse du SSD pour les petits fichiers et le débit massé du disque dur pour les fichiers volumineux.

Dynamic Data Acceleration hiérarchise les données sur différents supports au sein du système de stockage, mais pas en fonction des caractéristiques d’utilisation. Sa hiérarchisation par taille de fichier revendique un avantage de performance 2x en termes de GBps par rapport aux rivaux du système de fichiers BeeGFS, Lustre et GPFS / Spectrum Scale d’IBM.