Google's nieuwe Gemini 2.0 model is hier met experimentele AI-agenten

Google sluit 2024 af met een knaller. Op woensdag kondigde de gigant uit Mountain View een stortvloed aan AI-nieuws aan, waaronder de release van Gemini 2.0, een gloednieuw taalmodel met geavanceerde multimodale mogelijkheden. Het nieuwe model luidt wat Google het "agententijdperk" noemt in, waarin virtuele AI-agenten namens u taken kunnen uitvoeren.

In eerste instantie brengt Google slechts één model uit de Gemini 2.0-familie uit: Gemini 2.0 Flash experimenteelis een supersnel, lichtgewicht model met ondersteuning voor multimodale invoer en uitvoer. Het kan van nature afbeeldingen genereren gemengd met tekst en meertalige audio, en kan naadloos aansluiten op Google Zoeken, code uitvoeren en andere tools. Deze mogelijkheden zijn momenteel in preview voor ontwikkelaars en bètatesters. Ondanks het kleine formaat, presteert 2.0 Flash beter dan Gemini 1.5 Pro op verschillende gebieden zoals feitelijkheid, redeneren, coderen, wiskunde, enz. en dat ook nog eens met een twee keer zo hoge snelheid. Normale gebruikers kunnen vanaf vandaag de chat-geoptimaliseerde versie van Gemini 2.0 Flash op het web uitproberen en deze komt binnenkort ook naar de mobiele app van Gemini.

Google laat ook een aantal indrukwekkende ervaringen zien die met Gemini 2.0 zijn gebouwd. De eerste is de bijgewerkte versie van Project Astra, een experimentele virtuele AI-agent die Google voor het eerst liet zien in mei 2024. Met Gemini 2.0 kan het nu gesprekken voeren in meerdere talen, gebruik maken van tools zoals Google Search, Lens en Maps, dingen onthouden uit eerdere gesprekken en taal begrijpen met de latentie van een menselijke conversatie. Project Astra is ontworpen om op smartphones en brillen te draaien, maar is momenteel beperkt tot een kleine groep vertrouwde testers. Geïnteresseerden die het prototype op hun Android telefoon willen uitproberen, kunnen zich hier aanmelden voor de wachtlijst. Er is ook deze echt coole demo van de Multimodal Live APIdie enigszins lijkt op Project Astra en waarmee u in realtime kunt communiceren met een chatbot via video, spraak en schermdeling.

De volgende is Project Mariner, een experimentele Chrome browserextensie die op internet kan surfen en taken voor u kan uitvoeren. De extensie, die momenteel beschikbaar is voor geselecteerde testers in de VS, maakt gebruik van de multimodale mogelijkheden van Gemini 2.0 "om informatie op uw browserscherm te begrijpen en te doorgronden, inclusief pixels en webelementen zoals tekst, code, afbeeldingen en formulieren" Google erkent dat de technologie nog in de kinderschoenen staat en niet altijd betrouwbaar is. Maar zelfs in zijn huidige prototypevorm is het ontegenzeggelijk indrukwekkend, zoals u zelf kunt zien in deze YouTube-demo.

Google kondigde ook Jules aan, een AI-aangedreven code-agent die wordt aangedreven door Gemini 2.0. Het integreert direct in uw GitHub workflow en het bedrijf zegt dat het bugfixes en repetitieve tijdrovende taken kan afhandelen "terwijl u zich concentreert op wat u eigenlijk wilt bouwen"

Veel van de nieuw aangekondigde dingen zijn momenteel beperkt tot vroege testers en app-ontwikkelaars. Google zegt dat het van plan is om Gemini 2.0 begin volgend jaar te integreren in zijn productportfolio, waaronder Zoeken, Werkruimte, Kaarten en meer. Dan krijgen we een beter inzicht in hoe deze nieuwe multimodale mogelijkheden en verbeteringen zich vertalen naar echte gebruikssituaties. Er is ook nog niets bekend over de Gemini 2.0 Ultra en Pro modellen.