Muskov Grok AI postao open source

Prošle godine Elon Musk je najavio veliki jezični model (LLM) Grok koji razvija njegov AI startup xAI. Tada je rekao da će Groku "otvoriti kod", što znači da će svatko moći preuzeti datoteke i raditi s njima što god želi poput izrade chatbotova ili AI modela namijenjenih specifičnim zadaćama.

Sada je xAI to doista i učinio, što znači da na Githubu možete pronaći i preuzeti sve datoteke AI modela za koji kažu da ima 314 milijardi parametara, što znači da ćete morati imati računalo s dovoljno GPU memorije kako bi mogli testirati model na objavljenom primjeru koda.

Sada svaki programer, poduzetnik, tvrtka ili pojedinac mogu preuzeti Grok i koristiti kopiju modela za što god žele, pa čak i za komercijalnu primjenu.

Treba naglasiti da dobivate samo osnovni model koji nije podešen niti za jednu namjenu poput sustava za razgovor i postavljanje opita, odnosno chatbota.

Tvrtka xAI posebno se hvali s 314 milijardi parametara te kažu da se oni odnose na načine na koji se upravlja modelom. Što je više parametara, općenito je model napredniji, složeniji i učinkovitiji, a s 314 milijardi parametara, Grok je daleko ispred konkurenata otvorenog koda kao što su Metin Llama2 (70 milijardi parametara) i Mistral 8x7B (12 milijardi parametara).

Grok je otvoren pod licencom Apache 2.0 , koja omogućuje komercijalnu upotrebu, izmjene i distribuciju, ali ne postoji nikakva odgovornost ili jamstvo koje korisnici dobivaju s njim. Osim toga, moraju reproducirati izvornu licencu i obavijest o autorskom pravu te navesti promjene koje su napravili.

Grokova arhitektura, razvijena korištenjem prilagođenog skupa za obuku na JAX-u i Rustu u listopadu 2023., uključuje inovativne pristupe dizajnu neuronske mreže.

Grok je prvotno objavljen kao vlasnički model ili model "zatvorenog koda" još u studenom 2023. i do sada je bio dostupan samo na Muskovoj zasebnoj, ali povezanoj društvenoj mreži X (bivši Twitter), putem plaćene pretplatničke usluge X Premium+, koja košta 16 USD.

Grok u open source obliku ne uključuje cijeli korpus njegovih podataka o obuci. To zapravo nije važno za korištenje modela, budući da je već obučen, ali ne dopušta korisnicima da vide ono iz čega je učio, vjerojatno iz korisničkih tekstualnih objava na X-u (Twitteru), mada to Musk i ekipa nisu objavili.

Grok otvorenog koda također ne uključuje mogućnost traženja informacije u stvarnom vremenu, što je Musk hvalio kao glavnu prednost u odnosu na druge AI modele pa ćete za to morati biti pretplaćeni na X Premium+.

U svakom slučaju biti će zanimljivo vidjeti kakve će stvari ljudi raditi na temelju Groka i što će na ovo reći Sam Altman i ekipa iz OpenAI-ja.