La startup française Mistral AI a officiellement bouclé sa très attendue levée de fonds de série A. La société a récolté 385 millions d’euros, soit 415 millions de dollars au taux de change actuel, ce qui valorise l’entreprise à environ 2 milliards de dollars, selon Bloomberg. Mistral AI ouvre également sa plateforme commerciale aujourd’hui.
Pour rappel, Mistral AI avait levé 112 millions de dollars en amorçage il y a moins de six mois afin de créer un concurrent européen à OpenAI. Fondée par d’anciens membres de Google DeepMind et Meta. Mistral AI travaille sur des modèles fondamentaux avec une approche technologique ouverte.
Andreessen Horowitz est à la tête de cette levée de fonds la plus récente, avec Lightspeed Venture Partners investissant à nouveau dans la société d’IA. Ce n’est pas tout, une longue liste d’investisseurs participe aussi à cette levée, tels que Salesforce, BNP Paribas, CMA-CGM, General Catalyst, Elad Gil et Conviction.
“Depuis la création de Mistral AI en mai, nous suivons une trajectoire claire : celle de créer un champion européen à vocation mondiale en intelligence artificielle générative, basé sur une approche ouverte, responsable et décentralisée de la technologie”, a déclaré le cofondateur et PDG de Mistral AI, Arthur Mensch, dans un communiqué.
En septembre, Mistral AI a publié son premier modèle appelé Mistral 7B. Ce grand modèle de langage n’a pas pour vocation de concurrencer directement le GPT-4 ou le Claude 2 car il a été entraîné sur un “petit” ensemble de données d’environ 7 milliards de paramètres.
Au lieu d’ouvrir l’accès au modèle Mistral 7B via des API, la société l’a rendu disponible en téléchargement gratuit afin que les développeurs puissent l’exécuter sur leurs appareils et serveurs.
Le modèle a été publié sous la licence Apache 2.0. Une licence open-source qui ne comporte aucune restriction d’utilisation ou de reproduction autre que l’attribution. Bien que le modèle puisse être utilisé par n’importe qui, il a été développé à huis clos. Avec un jeu de données propriétaire et des poids non divulgués.
Mistral AI a également joué un rôle important dans l’élaboration des discussions autour de l’Acte de l’UE sur l’IA. La startup française en IA a fait pression pour une exemption totale des modèles fondamentaux, affirmant que la réglementation devrait s’appliquer aux cas d’utilisation et aux entreprises travaillant sur des produits utilisés directement par les utilisateurs finaux.
Les législateurs de l’UE ont conclu un accord politique il y a seulement quelques jours. Les entreprises travaillant sur des modèles fondamentaux devront respecter certaines exigences en matière de transparence et devront partager une documentation technique ainsi que des résumés de ce qui se trouve dans les jeux de données.
Le meilleur modèle de Mistral AI n’est désormais accessible que via une API.
La société prévoit toujours de tirer des revenus de ses modèles fondamentaux. C’est pourquoi Mistral AI ouvre aujourd’hui sa plateforme de développement en version bêta. Grâce à cette plateforme, d’autres entreprises pourront payer pour utiliser les modèles de Mistral AI via des API.
En plus du modèle Mistral 7B (“Mistral-tiny”), les développeurs pourront accéder au nouveau modèle Mixtral 8x7B (“Mistral-small”). Ce modèle utilise “un réseau de routeurs” pour traiter les jetons d’entrée et choisir le groupe le plus approprié de paramètres pour fournir une réponse.
“Cette technique augmente le nombre de paramètres d’un modèle tout en maîtrisant les coûts et la latence, car le modèle n’utilise qu’une fraction de l’ensemble total de paramètres par jeton. Concrètement, Mixtral a 45 milliards de paramètres au total mais n’utilise que 12 milliards de paramètres par jeton. Il traite donc l’entrée et génère la sortie à la même vitesse et pour le même coût qu’un modèle de 12 milliards”, a écrit l’entreprise dans un article de blog.
Mixtral 8x7B a également été publié sous la licence Apache 2.0 et est disponible en téléchargement gratuit. Un troisième modèle, Mistral-medium, est disponible sur la plateforme de développement de Mistral. Il semble mieux performer que les autres modèles de Mistral AI et n’est accessible que via la plateforme API payante, aucun lien de téléchargement n’étant disponible.
Leave a Reply