Améliorations apportées à Vertex AI #
Cette mise à jour notable a été annoncée lors de l’événement Next de Google à Las Vegas. Un des nouveaux ajouts est Gemini 1.5 Pro qui est capable de supporter jusqu’à 1 million de tokens en fenêtre contextuelle, une caractéristique qui évite l’affinage des modèles ou l’usage du RAG (Retrieval Augmented Generation) pour rectifier les réponses du modèle.
Gemini 1.5 Pro a également la capacité de traiter les flux audio, y compris la parole et le son des vidéos. Cette fonctionnalité offre aux utilisateurs la possibilité d’analyser divers médias pour obtenir des informations sur le texte, les images, les vidéos et le son. De plus, le modèle Pro supporte la transcription, qui peut être utilisée pour rechercher du contenu audio et vidéo.
Nouveautés du LLM Imagen 2 et arrivée de Codegemma #
Dans le catalogue de Google Cloud, le LLM Imagen 2 a évolué, offrant désormais des capacités d’édition de photos, la possibilité de créer des vidéos de 4 secondes ou des « images en direct » à partir d’invites textuelles. Bien que la fonction de création d’images en direct soit encore en mode preview, les capacités d’édition de photos sont généralement disponibles. De son côté, CodeGemma, un modèle léger de la famille propriétaire Gemma, fait aussi partie des mises à jour LLM de Vertex AI.
À lire Des astuces de grand-mère pour éliminer la moisissure et protéger votre santé
Google Cloud va permettre aux équipes d’utiliser des LLM dans Google Search et leurs propres données via Vertex AI. Cela aidera les entreprises à obtenir des réponses plus précises de leurs modèles de base, qui sont souvent limités par leurs données d’entraînement et peuvent rapidement devenir obsolètes.
Amélioration des capacités MLOps dans Vertex AI #
Dans le but d’aider les entreprises dans leurs tâches d’apprentissage machine, Google Cloud a étendu les capacités MLOps de Vertex AI. Parmi les fonctionnalités étendues, on trouve Prompt Management qui aide les équipes à expérimenter des invites, à les migrer et à les suivre ainsi que les paramètres. Cette fonctionnalité offre également une bibliothèque d’invites utilisées par les équipes, y compris les versions, l’option de restauration des anciennes invites et les suggestions générées par l’IA pour améliorer les performances des requêtes.
De plus, la fonction de gestion des prompts permet aux entreprises de comparer les itérations d’invites côte à côte afin d’évaluer l’impact de petits changements sur les résultats. Cette fonctionnalité donne également aux équipes la possibilité de prendre des notes. D’autres outils d’évaluation ont été étendus, dont un actuellement en preview pour évaluer les performances du modèle lors de l’itération de la conception de l’invite.
Introduction d’un agent builder pour Vertex AI #
Google Cloud a lancé une offre d’agent builder basée sur l’IA générative, appelée Vertex AI Agent Builder. Cette offre no-code, qui combine Vertex AI Search et le portefeuille de produits Conversation de la firme, propose une gamme d’outils pour construire plus rapidement des chatbots étayés par les LLM Gemini. L’offre no-code intègre également un système RAG prêt à l’emploi, Vertex AI Search, qui permet de créer des agents plus rapidement que les techniques RAG traditionnelles qui peuvent être longues et compliquées.
En plus de toutes les mises à jour de Vertex AI, Google a ajouté Gemini à son offre de business intelligence, Looker. Cette infusion donne à la plateforme des capacités d’analyse conversationnelle, de génération de rapports et de formules, LookML, d’assistance à la visualisation, ainsi que de génération automatisée de diapositives Google.
- La capacité de traitement audio de Gemini 1.5 Pro permet une analyse multimodale.
- Imagen 2 offre désormais des capacités d’édition de photos.
- CodeGemma, un modèle léger, a été ajouté au portefeuille LLM de Vertex AI.
- La fonctionnalité Prompt Management aide à expérimenter, migrer et suivre les invites.
- Vertex AI Agent Builder permet de construire plus rapidement des chatbots.
- Gemini a été ajouté à l’offre de business intelligence de Google, Looker.
Dans l’ensemble, ces améliorations apportées à Vertex AI vont certainement rendre la création et le déploiement d’IA générative plus facile et plus efficace. L’ajout de nouveaux LLM et l’introduction d’un agent builder sont des étapes significatives vers la réalisation de cet objectif. Les entreprises peuvent désormais profiter de ces nouvelles fonctionnalités pour améliorer leurs opérations d’apprentissage machine et obtenir des résultats plus précis. Avec ces mises à jour, Vertex AI continue de se positionner comme un leader dans le domaine de l’IA générative.
