Zilliz est une entreprise technologique qui fournit un service de base de données vectorielle basé sur le cloud, construit sur le projet open-source Milvus. L'entreprise se concentre sur la fourniture d'une infrastructure gérée pour les charges de travail d'intelligence artificielle et de apprentissage automatique, en particulier celles impliquant la recherche de similarité et la récupération de données non structurées telles que les images, les textes et les fichiers audio. La plateforme de Zilliz est conçue pour prendre en charge des applications allant des systèmes de IA générative aux moteurs de recommandation et à la détection d'anomalies.
L'entreprise a été fondée en 2017 par Charles Xie, qui a précédemment travaillé chez Oracle et Yahoo. Zilliz a son siège social à San Francisco, en Californie, avec des opérations de recherche et développement en Chine. Le nom « Zilliz » est dérivé du mot « zillion », reflétant l'ambition de l'entreprise de gérer des opérations de données à l'échelle du milliard.
Milvus et la technologie des bases de données vectorielles
La technologie principale de Zilliz est Milvus, une base de données vectorielle open-source publiée pour la première fois en 2019. Milvus est conçu pour stocker, indexer et gérer des vecteurs massifs générés par des modèles de réseaux de neurones, tels que les embeddings provenant de grands modèles de langage ou de systèmes de reconnaissance d'images. La base de données prend en charge plusieurs algorithmes d'indexation, notamment HNSW (Hierarchical Navigable Small World) et IVF (Inverted File), pour permettre une recherche rapide du plus proche voisin approximatif.
En 2021, Zilliz a fait don de Milvus à la AI & Data Foundation de la Linux Foundation, établissant ainsi le projet comme un projet open-source neutre vis-à-vis des fournisseurs. L'entreprise continue de diriger le développement du projet tout en offrant un service cloud entièrement géré appelé Zilliz Cloud, qui fournit des fonctionnalités d'entreprise telles que la haute disponibilité, la réplication des données et les contrôles de sécurité.
Plateforme Zilliz Cloud
Zilliz Cloud est un service de base de données vectorielle entièrement géré disponible sur les principaux fournisseurs de cloud, notamment Amazon Web Services, Google Cloud et Microsoft Azure. La plateforme propose des options de clusters serverless et dédiés, permettant aux organisations de faire évoluer les charges de travail de recherche vectorielle sans gérer l'infrastructure sous-jacente. Les fonctionnalités clés incluent la multi-tenant, le contrôle d'accès basé sur les rôles et l'intégration avec les frameworks d'apprentissage automatique populaires.
Le service prend en charge le calcul accéléré par CPU et GPU, avec des options GPU exploitant le matériel AMD et NVIDIA pour une recherche de similarité à haut débit. Zilliz Cloud fournit des API compatibles avec Milvus, permettant une migration transparente depuis des déploiements auto-hébergés. En 2024, la plateforme traite des milliards de requêtes quotidiennement dans divers secteurs.
Applications et cas d'utilisation
La technologie de Zilliz est utilisée dans une large gamme d'applications de apprentissage profond. Dans l'IA générative, les bases de données vectorielles servent de couches de mémoire pour les grands modèles de langage, permettant la génération augmentée par récupération (RAG) où les modèles accèdent à des bases de connaissances externes. Les entreprises qui créent des chatbots, des moteurs de recherche sémantique et des systèmes de recommandation s'appuient sur Zilliz pour un stockage et une récupération efficaces des embeddings.
D'autres cas d'utilisation incluent la recherche de similarité d'images et de vidéos, la découverte de médicaments, la détection de fraude et la diffusion de contenu personnalisé. La plateforme est également employée dans les systèmes de conduite autonome pour la reconnaissance d'objets et en biotechnologie pour l'analyse de séquences génomiques. Zilliz rapporte des clients dans des secteurs tels que le commerce électronique, la finance, la santé et les médias.
Financement et croissance
Zilliz a levé un financement en capital-risque significatif pour soutenir sa croissance. En 2022, l'entreprise a complété un tour de financement de série B de 60 millions de dollars mené par Temasek, avec la participation d'investisseurs existants, notamment Yunqi Capital et 5Y Capital. Le financement a été dirigé vers l'expansion du service cloud, la croissance de l'équipe d'ingénierie et l'avancement de la recherche sur les algorithmes d'indexation vectorielle.
En 2023, Zilliz a rapporté plus de 1 000 clients entreprises et une communauté de plus de 10 000 développeurs utilisant Milvus. L'entreprise a établi des partenariats avec des fournisseurs de cloud et des entreprises d'infrastructure IA, notamment Coreweave et Cerebras, pour offrir des déploiements optimisés pour les environnements de calcul haute performance.
Paysage concurrentiel et orientations futures
Zilliz opère sur le marché en évolution rapide des bases de données vectorielles, en concurrence avec d'autres fournisseurs spécialisés et des bases de données généralistes ajoutant un support vectoriel. L'entreprise se différencie par son accent sur le développement open-source et l'optimisation des performances pour les ensembles de données à l'échelle du milliard. Zilliz continue d'investir dans la recherche sur les algorithmes de plus proche voisin approximatif et les capacités de recherche hybride qui combinent le filtrage vectoriel et scalaire.
Les priorités de développement futur incluent l'amélioration de l'intégration avec les modèles basés sur transformers, l'amélioration du support des données en streaming en temps réel et l'expansion des services gérés vers des régions cloud supplémentaires. L'entreprise explore également des partenariats avec OpenAI et d'autres fournisseurs de modèles IA pour rationaliser le déploiement d'applications augmentées par récupération.
Communauté et écosystème
Zilliz maintient une communauté open-source active autour de Milvus, avec des versions régulières et des contributions de développeurs du monde entier. Le projet a été adopté par des institutions académiques et des laboratoires de recherche, notamment MIT CSAIL et BAIR (Berkeley AI Research), pour des expériences en recherche de similarité à grande échelle. Zilliz organise également des conférences et des rencontres pour favoriser le partage de connaissances dans le domaine des bases de données vectorielles et de l'infrastructure IA.
L'entreprise fournit une documentation complète, des SDK dans plusieurs langages de programmation et des tutoriels pour abaisser la barrière à l'adoption. Grâce à ses programmes communautaires, Zilliz vise à établir Milvus comme la base de données vectorielle open-source standard, de la même manière que les bases de données relationnelles sont devenues fondamentales pour la gestion traditionnelle des données.