Google kondigt Gemini 2.0 modellen aan voor 'het agententijdperk'

Negen maanden na de lancering van Gemini 1.5, kondigde Google https://blog.google/technology/google-deepmind/google-gemini-ai-update-december-2024/#ai-game-agents de volgende grote update voor het Large Language Model (LLM), Gemini 2.0. Het eerste model uit de familie, Gemini 2.0 Flash, kan worden geselecteerd als experimenteel model in Google AI Studio en Vertex AI.

Gemini 2.0 Flash heeft "verbeterde prestaties bij even snelle responstijden" en presteert beter dan 1.5 Flash met "tweemaal de snelheid" Naast multimodale invoer zoals afbeeldingen, tekst, video en audio, ondersteunt de nieuwe LLM afbeeldingen gemengd met tekst en tekst-naar-spraak meertalige audio.

2.0 Flash kan ook native toegang tot Google Search en ondersteunt code-uitvoering door derden en vooraf gedefinieerde functies. Google geeft ook zijn Multimodal Live API vrij aan ontwikkelaars. Een voor chat geoptimaliseerde versie van 2.0 Flash zal beschikbaar zijn voor desktop- en mobiele browsers. Google zegt dat er binnenkort een versie beschikbaar zal zijn voor de mobiele app Gemini.

Google's Project Astra onderzoeksprototype is ook bijgewerkt met Gemini 2.0 en heeft nu betere dialogen, redeneringen en native ondersteuning voor tools zoals Google Search, Lens en Maps. Het heeft tot 10 minuten aan in-sessiegeheugen.

Project Mariner, een ander onderzoeksprototype gebouwd op 2.0, kan complexe instructies begrijpen en informatie van een browserscherm opvragen, inclusief "pixels en webelementen zoals tekst, code, afbeeldingen en formulieren, en gebruikt die informatie vervolgens via een experimentele Chrome-extensie om taken voor u uit te voeren"

Het derde prototype, een experimentele AI-code-assistent, Jules, kan direct in GitHub-workflows worden geïntegreerd. Het heeft redeneer- en logicamogelijkheden om code-uitdagingen aan te pakken en een plan te ontwikkelen om ze onder toezicht van de ontwikkelaar op te lossen.

Google zegt dat het ook AI-agenten heeft gebouwd "met Gemini 2.0 die u kunnen helpen navigeren in de virtuele wereld van videogames. Het kan redeneren over het spel op basis van alleen de actie op het scherm, en suggesties geven voor wat u hierna moet doen in realtime conversatie."