Grok, Twitter/X-ov AI chatbot, sada je otvorenog koda
xAI (kompanija koju je suosnivač Elon Musk, podržana sa oko milijardu dolara za razvoj tehnologija vezanih za umjetnu inteligenciju), nedavno je objavio vijest o svojoj odluci da objavi Grok izvorni kod njihov LLM koji se koristi u chatbotu integriranom u društvenu mrežu X (Twitter).
grok je prethodno obučen koristeći opsežnu zbirku podataka teksta koristeći xAI-ov vlasnički stek za učenje. Ima otprilike 314 milijardi parametara, što ga čini najvećim modelom otvorenog jezika koji je trenutno dostupan.
Grok je sada otvorenog koda
Nedavno Eleon Musk je najavio da će Grok postati open source, što se već dogodilo. To znači da programeri širom svijeta mogu promatrati unutrašnje djelovanje Groka i koristiti ga za pokretanje vlastitih AI modela.
Sistem za ćaskanje s umjetnom inteligencijom Grok, razvijen od strane xAI kompanije Elona Muska, je pušten američkim korisnicima platforme društvenih medija X u decembru. Grok je dizajniran da se takmiči s glavnim sistemima umjetne inteligencije na tržištu, poput onih iz Googlea i, posebno, OpenAI. Ono što Groka izdvaja od konkurencije je njegova sposobnost da uklopi humor i sarkastične tonove, inspirisane veštački inteligentnim kompjuterima u čuvenim knjigama Autostoperski vodič kroz galaksiju.
Otvorena verzija modela Grok-1 je objavljen u osnovnoj reprezentaciji i ne uključuje specifične optimizacije za određene oblasti upotrebe, kao što je organizovanje sistema dijaloga. Ovaj model Ima otprilike 314 milijardi parametara i obučen je od nule od strane xAI koristeći prilagođeni stek za obuku zasnovan na JAX-u i Rustu. xAI je jasno stavio do znanja da objavljuju težine modela i arhitekturu pod licencom Apache 2.0, omogućavajući komercijalnu upotrebu. Međutim, važno je napomenuti da ova verzija ne uključuje podatke koji se koriste za obuku velikog AI jezičkog modela niti nudi pristup podacima u realnom vremenu.
Grokov pristup otvorenog koda mogao bi naglasiti njegove slabosti, ali Musk je zagovornik otvorenog koda i bio je investitor u OpenAI. Uprkos tome, on trenutno kontroverzno tuži OpenAI, tvrdeći da je kompanija odstupila od svojih temeljnih principa otvorenosti prema potrazi za profitabilnošću. Muskovi advokati čak sugerišu da OpenAI drži delove svog GPT-4 AI sistema u tajnosti od tržišta.
Musk je izrazio svoje mišljenje o važnosti transparentnosti i potrage za istinom u umjetnoj inteligenciji. Spomenuli ste da, iako ima još posla, vaša X platforma je najtransparentnija i traži istinu. Osim toga, kritizirao je napore da se AI učini raznolikom po svaku cijenu, navodeći nedavna etička pitanja na drugim platformama.
Otvoreni pristup Groku je Muskov pokušaj da demonstrira nedostatak pristrasnosti u sistemu i demokratizuje pristup vještačkoj inteligenciji. Programeri sada mogu iskoristiti Grok kod za kreiranje AI aplikacija i usluga na pristupačniji i transparentniji način.
Na kraju, Vrijedi napomenuti da kod, Arhitektura neuronske mreže i slučajevi upotrebe Uz model je dostupan fajl spreman za upotrebu, koji ima veličinu od 296 GB.
Za izvođenje testova s ovim modelom, Preporučuje se korištenje GPU-a s velikom količinom memorije, iako vrsta potrebne memorije nije navedena. Dok je statična verzija modela javno dostupna, razvija se dodatna funkcija za Grok chatbot koji se dinamički integrira s novim sadržajima u nastajanju. Ova dinamična integracija se postiže kroz saradnju sa X/Twitter platformom, omogućavajući pristup novom znanju u realnom vremenu.
Ako ste zainteresovani da saznate više o tome, detalje možete provjeriti u sljedeći link.