Cloudian - Rapprocher les données de l'IA plus que jamais

L'intelligence artificielle transforme la façon dont les entreprises stockent et accèdent aux données. En effet, les systèmes de stockage de données traditionnels ont été conçus pour traiter des commandes simples de quelques utilisateurs à la fois, tandis que les systèmes d'IA actuels, composés de millions d'agents, doivent accéder et traiter d'énormes quantités de données en continu et en parallèle.

Les systèmes de stockage traditionnels comportent désormais de nombreuses couches de complexité, ce qui ralentit l'IA car les données doivent passer par de nombreuses couches avant d'atteindre le GPU - l'unité de traitement graphique, considérée comme la « cellule cérébrale » de l'IA.

Cloudian, cofondée par Michael Tso (du MIT) et Hiroshi Ohta, aide le stockage de données à s'adapter à la révolution de l'IA. L'entreprise a développé un système de stockage d'entreprise évolutif qui facilite la circulation des données entre les modèles de stockage et d'IA.

Le système réduit la complexité en appliquant le calcul parallèle au stockage, en consolidant les fonctionnalités d'IA et de données sur une seule plate-forme de traitement parallèle capable de stocker, de récupérer et de traiter des ensembles de données à grande échelle, avec une connectivité directe à haut débit entre le stockage et les GPU et les CPU.

La plateforme de stockage informatique intégrée de Cloudian simplifie la création d'outils d'IA à l'échelle commerciale, tout en fournissant aux entreprises une infrastructure de stockage capable de suivre l'explosion de l'IA.

« On oublie souvent que l'IA repose avant tout sur les données », explique Tso. « On ne peut pas augmenter les performances de l'IA de 10 % avec 10 % de données supplémentaires, et même 10 fois plus de données ne suffisent pas : il en faut 1 000 fois plus. Stocker les données de manière simple à gérer et y intégrer des calculs directement pour les exécuter au fur et à mesure, sans avoir à les déplacer, voilà la direction que prend le secteur. »

Stockage d'objets et IA

Actuellement, la plateforme Cloudian utilise une architecture de stockage objet, où tous les types de données (documents, vidéos , données de capteurs) sont stockés sous forme d'objets uniques avec métadonnées. Le stockage objet permet de gérer d'énormes volumes de données dans une structure plate, ce qui le rend idéal pour les données non structurées et les systèmes d'IA. Auparavant, il était impossible d'envoyer des données directement à un modèle d'IA sans les copier au préalable dans la mémoire de l'ordinateur, ce qui entraînait des temps de latence et un gaspillage d'énergie.

En juillet, Cloudian a annoncé l'ajout d'une base de données vectorielle à son système de stockage d'objets, stockant les données sous une forme immédiatement utilisable par l'IA. À mesure que les données sont ingérées, Cloudian calcule leur forme vectorielle en temps réel pour prendre en charge les outils d'IA tels que les moteurs de recommandation, les moteurs de recherche et les assistants IA.

Cloudian a également annoncé un partenariat avec NVIDIA pour que son système de stockage fonctionne directement avec ses GPU. Cloudian a déclaré que ce nouveau système permet un traitement de l'IA plus rapide et des coûts de calcul réduits.

« NVIDIA nous a contactés il y a environ un an et demi, car les GPU ne sont utiles que lorsqu'ils sont alimentés par des données », a déclaré Tso. « Aujourd'hui, les gens réalisent qu'il est plus facile d'intégrer l'IA aux données que de déplacer d'énormes volumes de données. Notre système de stockage intègre de nombreuses fonctionnalités d'IA, ce qui nous permet de prétraiter et de post-traiter les données à proximité de leur lieu de collecte et de stockage. »

Stockage prioritaire de l'IA

Cloudian aide environ 1 000 entreprises dans le monde à tirer le meilleur parti de leurs données, notamment de grands fabricants, des institutions financières, des établissements de santé et des agences gouvernementales.

Par exemple, la plateforme de stockage de Cloudian permet à un grand constructeur automobile d'utiliser l'IA pour déterminer quand chacun de ses robots de production nécessite une maintenance. Cloudian collabore également avec la Bibliothèque nationale de médecine des États-Unis pour stocker des articles de recherche et des brevets, et avec la Base de données nationale sur le cancer pour stocker des séquences d'ADN tumoral – des ensembles de données riches que l'IA peut traiter pour contribuer au développement de nouveaux traitements ou à la réalisation de nouvelles découvertes.

« Les GPU sont un formidable outil », explique Tso. « La loi de Moore double la puissance de calcul tous les deux ans, mais les GPU peuvent paralléliser les tâches sur une puce, enchaîner plusieurs GPU et aller au-delà de cette loi. Cette envergure propulse l'IA vers de nouveaux sommets d'intelligence, mais la seule façon d'optimiser les performances des GPU est de fournir des données au même rythme que leur puissance de calcul – et la seule façon d'y parvenir est de supprimer toutes les couches intermédiaires entre le GPU et vos données. »

(Selon le MIT)

Source : https://vietnamnet.vn/cloudian-dua-du-lieu-den-gan-ai-hon-bao-gio-het-2433241.html