Googleov Gemini je navodno najbolji generativni AI

Googleov Bard AI je svojevremeno predstavljen kao odgovor OpenAI-jevom ChatGPT-u, no Googleov istraživački laboratorij Google DeepMind je sada predstavio svoj novi, napredniji model generativne umjetne inteligencije pod nazivom Gemini.

Google kaže da je Gemini prvi model koji je nadmašio ljudske stručnjake u MMLU testu (Massive Multitask Language Understanding), jednoj od najpopularnijih metoda za testiranje znanja i sposobnosti rješavanja problema AI modela.

Google je objavio rezultate testova u kojem je Gemini direktno usporedio s GPT-4, po kojima ispada da je točniji u odgovorima na 57 općenitih pitanja koja uključuju STEM, humanističke znanosti i druge pitanja. Točnije rečeno, Gemini je odgovorio točno na 90 posto pitanja, u usporedbi sa GPT-4 koji je ostvario rezultat od 86,4 posto.

Pored toga, Gemini se pokazao uspješniji u dva od tri testa rasuđivanja, Big-Bench Hardu (raznovrstan skup izazovnih zadataka koji zahtijevaju razmišljanje u više koraka) i PAD-u (Razumijevanje pročitanog), dok je GPT-4 postigao bolji rezultat u HellaSwag testu koji se odnosi na zdravo razmišljanje za svakodnevne zadatke.

Nadalje, Gemini je uspješniji u zadacima iz matematike, GSM8X testu (Osnovne aritmetičke manipulacije koje uključuju zadatke iz matematike u osnovnoj školi) i izazovnim matematičkim problemima koji uključuju algebru, geometriju, predračun i druge.

Što se tiče programiranja, odnosno pisanja koda, Gemini je uspješniji u HumanEval i Natural2Code testovima generiranja Python koda.

I na kraju, Google se pohvalio da je Gemini bolji u multimodalnim zadacima koji uključuju multidisciplinarne probleme zaključivanja na razini fakulteta, prirodno razumijevanje slike, OCR na prirodnim slikama, razumijevanje dokumenata, razumijevanje infografike matematičko zaključivanje u vizualnim kontekstima, kao i da je uspješniji u zadacima koji se odnose na video i audio, uključujući postavljanje engleskih tvideo titlova i automatski prijevod govora.

Treba naglasiti da se radi o vrlo malim postocima po kojima je Gemini prema tvrdnjama Googla bolji od GPT-4 modela, tako da ne možemo reći da ga je "potukao", pogotovo ne prije nezavisnih usporednih testova koje netko tek treba provesti.

Što o Geminiju kažu Googleovi stručnjaci za umjetnu inteligenciju možete pogledati u ovom videu.

Google nudi Gemini u tri modela, Ultra, Pro i Nano. Najjači model Nano omogućuje punu snagu generativnog AI-a, dok su Pro i Nano namijenjeni za aplikacije koje rade na ograničenim računalnim resursima.

Ako se pitate što je sad s Googleovim Bard AI chatbotom, odnosno digitalnim AI asistentom, Google kaže da je Gemini već ugrađen u njega, što znači da ga već možete isprobati putem ove poveznice.