Rencontrez Gemma : le nouveau modèle d’IA open source de Google

C’est basé sur Google Gemini, compris ?

Découvrez Gemma, le modèle d’IA open source de Google.

Mercredi, Google a annoncé une nouvelle famille de modèles destinés à « aider les développeurs et les chercheurs à développer l’IA de manière responsable ». Gemma est construit à partir des mêmes recherches et technologies utilisées pour créer Gemini, ses modèles à source fermée qui alimentent le chatbot Gemini (anciennement Bard) et les outils liés à l’IA pour Workspace (anciennement Duet AI).

Gemma poussera-t-elle Google devant la course à l’IA ?

La concurrence en matière d’IA entre Google et OpenAI est toujours forte en 2024, mais OpenAI semble avoir l’avantage. Pratiquement toutes les deux semaines, nous recevons une nouvelle fonctionnalité ou une mise à jour de Google, seulement pour qu’OpenAI propose quelque chose de plus grand. En décembre, Google a annoncé Gemini et moins d’un mois plus tard, OpenAI a lancé les magasins GPT. La semaine dernière, Google a annoncé une mise à jour « flashy » de Gemini appelée « Gemini 1.5 ». Cependant, cela a été rapidement éclipsé par le dévoilement par OpenAI de son générateur vidéo AI Sora.

Mais une chose qu’OpenAI n’a pas encore fait est de développer des versions open source de ses modèles (la transparence n’est pas vraiment son point fort.) Google n’a pas non plus été entièrement ouvert sur la façon dont ses modèles d’IA sont formés, mais il a créé Gemma parce que l’entreprise croit qu’il faut « rendre l’IA utile à tout le monde », selon l’annonce.

Gemma est disponible en deux poids de modèle : Gemma 2B et Gemma 7B. Les deux sont pré-entraînés et disposent de variantes optimisées pour les instructions, qui peuvent s’exécuter sur un ordinateur portable ou un ordinateur de bureau de développeur doté d’un processeur ou d’un GPU, ainsi que sur Google Cloud avec une accélération GPU et TPU. Contrairement à Gemini, qui est multimodal, Gemma ne prend en charge que le texte à texte. Mais en termes de performances, Google affirme que Gemma « dépasse les modèles nettement plus grands sur des critères clés tout en adhérant à nos normes rigoureuses en matière de production sûre et responsable ». (Il convient de noter que le document technique n’était pas disponible au moment de la publication.)

En parlant de sécurité et de responsabilité, Gemma est pré-formée pour filtrer les informations personnelles et sensibles. Il a été testé avec un apprentissage par renforcement à partir de commentaires humains (RLHF) pour l’alignement. De plus, il a fait l’objet d’une équipe rouge manuelle et de tests contradictoires pour détecter les dommages potentiels.

Aux côtés de Gemma, Google publie également une nouvelle boîte à outils d’IA générative responsable, qui comprend des ressources de classification de sécurité, de débogage et de meilleures pratiques pour le développement de LLM.

L’accès à Gemma est gratuit sur Kaggle et Colab. Il est également disponible via Hugging Face, MaxText et Nvidia NeMo. De plus, les nouveaux utilisateurs de Google Cloud bénéficient de 300 $ de crédits.