xAI, inilabas ko ang source code ng Grok ang LLM na ginamit sa X chatbot  

grok

Ang Grok, ang AI chatbot ng Twitter/X, ay open source na ngayon

xAI (isang kumpanyang itinatag ni Elon Musk, na sinusuportahan ng humigit-kumulang isang bilyong dolyar para sa pagbuo ng mga teknolohiyang nauugnay sa artificial intelligence), kamakailan ay naglabas ng balita tungkol sa desisyon nitong ilabas ang source code ng Grok kanilang LLM na ginagamit sa isang chatbot na isinama sa social network X (Twitter).

Grok ay paunang sinanay gamit ang malawak na koleksyon ng data ng text gamit ang proprietary learning stack ng xAI. Mayroon itong humigit-kumulang 314 bilyong mga parameter, na ginagawa itong pinakamalaking modelo ng bukas na wika na kasalukuyang magagamit.

Ang Grok ay open source na ngayon

Kamakailan, Inihayag ni Eleon Musk na ang Grok ay magiging open source, na nangyari na. Nangangahulugan ito na ang mga developer sa buong mundo ay maaaring obserbahan ang mga panloob na gawain ng Grok at gamitin ito upang paganahin ang kanilang sariling mga modelo ng AI.

Ang Grok artificial intelligence chatbot system, na binuo ng xAI na kumpanya ng Elon Musk, ay inilabas sa mga Amerikanong gumagamit ng social media platform X noong Disyembre. Ang Grok ay idinisenyo upang makipagkumpitensya sa mga pangunahing sistema ng artificial intelligence sa merkado, tulad ng mga mula sa Google at, lalo na, OpenAI. Ang ipinagkaiba ni Grok sa kanyang mga kakumpitensya ay ang kanyang kakayahang magsama ng katatawanan at mga sarkastikong tono, na inspirasyon ng artipisyal na matalinong mga computer sa sikat na Hitchhiker's Guide to the Galaxy na mga aklat.

Ang bukas na bersyon ng modelo Ang Grok-1 ay inilabas sa isang pangunahing representasyon at hindi kasama ang mga partikular na pag-optimize para sa ilang partikular na lugar ng paggamit, gaya ng pag-aayos ng mga sistema ng diyalogo. Ang modelong ito Mayroon itong humigit-kumulang 314 bilyong mga parameter at sinanay mula sa simula ng xAI gamit ang isang custom na stack ng pagsasanay batay sa JAX at Rust. Nilinaw ng xAI na inilalabas nila ang mga timbang at arkitektura ng modelo sa ilalim ng lisensya ng Apache 2.0, na nagbibigay-daan para sa komersyal na paggamit. Gayunpaman, mahalagang tandaan na hindi kasama sa bersyong ito ang data na ginamit upang sanayin ang malaking modelo ng wika ng AI at hindi rin ito nag-aalok ng access sa real-time na data.

Maaaring i-highlight ng open source na diskarte ng Grok ang mga kahinaan nito, ngunit ang Musk ay isang open source advocate at naging mamumuhunan sa OpenAI. Sa kabila nito, siya ay kasalukuyang kontrobersyal na naghahabol sa OpenAI, na nangangatwiran na ang kumpanya ay naligaw mula sa mga prinsipyo ng pagiging bukas tungo sa pagtugis ng kakayahang kumita. Iminumungkahi pa ng mga abogado ni Musk na pinapanatili ng OpenAI ang mga bahagi ng GPT-4 AI system nitong sikreto mula sa merkado.

Ang Musk ay nagpahayag ng kanyang opinyon sa kahalagahan ng transparency at ang paghahanap ng katotohanan sa artificial intelligence. Nabanggit mo na bagama't may dapat pang gawin, ang iyong X platform ay ang pinaka-transparent at naghahanap ng katotohanan. Bukod pa rito, pinuna niya ang mga pagsisikap na gawing iba-iba ang AI sa lahat ng mga gastos, na binabanggit ang mga kamakailang isyu sa etika sa iba pang mga platform.

Ang bukas na pag-access sa Grok ay isang pagtatangka ng Musk na ipakita ang kakulangan ng bias sa system at i-demokratize ang pag-access sa artificial intelligence. Magagamit na ngayon ng mga developer ang Grok code para gumawa ng mga AI application at serbisyo sa mas naa-access at transparent na paraan.

Sa wakas, Ito ay nagkakahalaga ng pagbanggit na ang code, Arkitektura ng Neural Network at Mga Kaso ng Paggamit Isang ready-to-use na file ang ginawang available kasama ng modelo, na may sukat na 296 GB.

Upang magsagawa ng mga pagsubok gamit ang modelong ito, Inirerekomenda na gumamit ng GPU na may malaking halaga ng memorya, kahit na hindi tinukoy ang uri ng memorya na kinakailangan. Habang ang isang static na bersyon ng modelo ay magagamit sa publiko, isang karagdagang tampok ang ginagawa para sa Grok chatbot na dynamic na sumasama sa bagong umuusbong na nilalaman. Ang dynamic na pagsasama na ito ay nakakamit sa pamamagitan ng pakikipagtulungan sa X/Twitter platform, na nagbibigay-daan sa pag-access sa bagong kaalaman sa real time.

Kung interesado kang malaman ang higit pa tungkol dito, maaari mong tingnan ang mga detalye sa sumusunod na link.