Pourquoi chaque « néocloud » a besoin d'une stratégie de stockage dans le cloud

La plupart des discussions sur les infrastructures d’IA tournent autour des GPU. Qui dispose de capacité ? Qui en loue ? Qui construit le prochain cluster ? En tant que spécialiste du stockage, je trouve cela un peu agaçant. Mais je comprends. Lorsqu’il s’agit de faire évoluer les charges de travail d’IA, la puissance de calcul a toujours été la principale contrainte, et elle l’est encore aujourd’hui dans de nombreux cas.

Mais qu’advient-il des données une fois que la phase d’entraînement est terminée, que le pipeline d’inférence est opérationnel ou que le modèle doit puiser dans une archive croissante de données non structurées ? C’est un problème de stockage. Et de plus en plus, les « néoclouds » et autres fournisseurs de plateformes d’IA cherchent à s’associer à des fournisseurs de stockage cloud indépendants et expérimentés comme Wasabi, qui ont déjà déployé à grande échelle un stockage objet cloud à l’échelle mondiale, plutôt que d’essayer de résoudre ce problème eux-mêmes.

L'évolution vers une infrastructure d'IA modulable

Au cours des deux dernières années, nous avons assisté à une véritable évolution dans la manière dont les meilleurs fournisseurs d’infrastructures abordent l’IA. Plutôt que d’essayer de développer eux-mêmes chaque couche, ils regroupent les meilleures technologies de chaque domaine (réseau, calcul, stockage) au sein d’une plateforme unique et intégrée, afin que leurs clients bénéficient d’une expérience homogène, au lieu de devoir gérer eux-mêmes une multitude de fournisseurs.

C’est le modèle adopté par de nombreux « néoclouds » : une infrastructure spécialement conçue pour charges de travail liées à l'IA réunis par un prestataire prêt à nouer des partenariats pour les aspects qui ne relèvent pas de son cœur de métier.

Nous observons ce modèle à l’œuvre au sein de notre propre écosystème de partenaires. Il ne s’agit pas d’une tendance à laquelle nous réagissons, mais plutôt d’un modèle pour lequel Wasabi a été conçu dès le premier jour. Nous ne vendons pas de puissance de calcul, nous ne sommes donc pas en concurrence avec les « néoclouds » comme le sont les hyperscalers. Nous nous concentrons sur une seule chose, et nous la faisons mieux que quiconque : S3 stockage d'objets dans le cloud, une tarification simple et prévisible, sans frais supplémentaires pour l'accès à vos données ou leur transfert. Nous avons annoncé et continuons à développer de nouvelles catégories de stockage afin de prendre en charge ces charges de travail variées, axées sur l'IA.

Le coût caché du stockage d'objets dans le cloud pour les charges de travail d'IA

Les pratiques de facturation opaques et les frais de stockage difficiles à évaluer, qui vont au-delà de la simple capacité brute, constituent des problèmes bien connus dans le secteur. Depuis plusieurs années d’affilée, notre Index du stockage dans le cloud Les enquêtes menées auprès des décideurs informatiques ont systématiquement révélé que les frais liés aux requêtes API, au trafic sortant et autres frais de transaction représentent 50 % de la facture moyenne de stockage dans le cloud. Pour les charges de travail d’IA, je m’attends à ce que ce pourcentage soit encore plus élevé.


En effet, les charges de travail d’IA sont en constante évolution. Les tâches d’entraînement enregistrent sans cesse des points de contrôle dans le stockage au fur et à mesure de leur exécution. Les applications RAG se connectent au stockage objet à chaque requête, pour extraire le contexte d’un référentiel de documents ou d’une base de données vectorielle. Les données sont répliquées d’une région à l’autre, transférées entre différents fournisseurs de ressources de calcul et importées dans divers outils tout au long de leur cycle de vie.

Chacune de ces étapes génère son propre appel d’API. Si vous stockez vos données chez un hyperscaler, chacun de ces appels d’API entraîne des frais d’API. Et chaque fois que les données quittent leur environnement pour être transférées vers un autre fournisseur, cela déclenche des frais de sortie qui s’ajoutent à ces frais d’API.

Plus il y a de mouvements, plus les frais sont élevés, et les charges de travail d’IA se déplacent plus que presque tout ce que nous stockons. Depuis des années, les hyperscalers constituent la solution par défaut pour le stockage d’objets dans le cloud, mais ce sont précisément leurs structures tarifaires qui rendent le transfert de données inabordable à grande échelle.

Megaport Ils ont été confrontés à ce même problème avec le stockage d'objets classique, et ils l'ont résolu grâce à Wasabi. 

Wasabi assure le fonctionnement de la couche de stockage objet standard de Megaport

Megaport est l’une des principales plateformes mondiales d’infrastructure automatisée. L’entreprise a mis en place un réseau mondial défini par logiciel et, grâce à l’acquisition de Latitude.sh, a ajouté des capacités de calcul basées sur des GPU — de véritables éléments constitutifs d’une plateforme d’infrastructure d’IA — ainsi que des capacités de stockage. Elle avait besoin d’un partenaire de stockage objet standard partageant sa vision d’un écosystème cloud ouvert et interconnecté, conçu pour offrir des performances et une évolutivité abordable, sans pour autant enfermer les clients dans un écosystème fermé.

C'est précisément ce qu'apporte ce partenariat. Megaport étend ses services de connectivité privée haut débit et de calcul aux 16 régions de stockage mondiales de Wasabi, afin que les clients puissent provisionner et accéder à des ressources dédiées stockage d'objets standard en quelques minutes, en toute transparence depuis la plateforme Megaport. Ils bénéficieront des mêmes tarifs abordables et de la même prévisibilité des coûts que ceux auxquels s'attendent déjà les clients de Wasabi, quel que soit le volume de données ou la fréquence de leurs transferts.

L'avenir du stockage basé sur l'IA et de l'infrastructure « néocloud »

Notre partenariat avec Megaport est formidable, et nous sommes ravis de pouvoir l’annoncer publiquement. Ce n’est d’ailleurs qu’un avant-goût de ce vers quoi, selon nous, l’infrastructure est en train d’évoluer : de plus en plus de fournisseurs assemblent des piles de technologies de pointe au lieu de tout construire (ou acheter) eux-mêmes. Nous nous attendons à voir se multiplier ce type de partenariats, et nous avons l’intention d’être la couche de stockage IA de référence lorsque cela se produira.

Nous avons récemment commencé à décrire Wasabi comme le cloud de stockage IA. C'est précisément pour cela que nous concluons des partenariats comme celui-ci : non pas parce que nous couvrons tous les besoins en matière d'infrastructure d'IA, mais parce que nous nous sommes concentrés sur l'élément indispensable à toute pile d'IA : un stockage objet dans le cloud rapide, à prix prévisible et sécurisé. Et nous le faisons mieux que quiconque.

Découvrez le Communiqué de presse Megaport-Wasabi pour plus d'informations.