Grok, chatbot AI firmy Twitter/X, jest teraz oprogramowaniem typu open source
xAI (firma współzałożona przez Elona Muska, wsparta około miliardem dolarów na rozwój technologii związanych ze sztuczną inteligencją), niedawno opublikowała wiadomość o swojej decyzji o udostępnieniu kodu źródłowego Groka ich LLM, który jest używany w chatbocie zintegrowanym z siecią społecznościową X (Twitter).
Grok został wstępnie przeszkolony przy użyciu obszernego zbioru danych tekstu przy użyciu zastrzeżonego stosu uczenia się xAI. Ma około 314 miliardów parametrów, co czyni go największym obecnie dostępnym modelem języka otwartego.
Grok jest teraz oprogramowaniem typu open source
Ostatnio Eleon Musk zapowiedział, że Grok stanie się oprogramowaniem open source, co już nastąpiło. Oznacza to, że programiści na całym świecie mogą obserwować wewnętrzne działanie Groka i wykorzystywać go do zasilania własnych modeli sztucznej inteligencji.
System chatbotów sztucznej inteligencji Grok, opracowany przez firmę xAI Elona Muska, został udostępniony amerykańskim użytkownikom platformy mediów społecznościowych X w grudniu. Grok ma konkurować z głównymi systemami sztucznej inteligencji na rynku, takimi jak Google, a zwłaszcza OpenAI. Tym, co wyróżnia Groka na tle konkurencji, jest umiejętność stosowania humoru i sarkastycznego tonu, inspirowana sztuczną inteligencją komputerów ze słynnego Przewodnika autostopem po galaktyce.
Otwarta wersja modelu Grok-1 wydawany jest w podstawowej wersji i nie zawiera konkretnych optymalizacji dla niektórych obszarów zastosowań, takich jak organizowanie systemów dialogu. Ten model Ma około 314 miliardów parametrów i został przeszkolony od podstaw przez xAI przy użyciu niestandardowego stosu szkoleniowego opartego na JAX i Rust. xAI dało jasno do zrozumienia, że udostępnia wagi i architekturę modeli w ramach licencji Apache 2.0, umożliwiającej wykorzystanie komercyjne. Należy jednak pamiętać, że ta wersja nie zawiera danych wykorzystywanych do uczenia dużego modelu językowego AI ani nie oferuje dostępu do danych w czasie rzeczywistym.
Podejście Groka oparte na otwartym kodzie źródłowym może uwypuklić jego słabe strony, ale Musk jest zwolennikiem open source i inwestorem w OpenAI. Mimo to obecnie kontrowersyjnie pozywa OpenAI, argumentując, że firma odeszła od swoich założycielskich zasad otwartości w stronę dążenia do rentowności. Prawnicy Muska sugerują nawet, że OpenAI ukrywa przed rynkiem części swojego systemu AI GPT-4.
Musk wyraził swoją opinię na temat znaczenia przejrzystości i poszukiwania prawdy w sztucznej inteligencji. Wspomniałeś, że choć jest jeszcze wiele do zrobienia, Twoja platforma X jest najbardziej przejrzysta i szuka prawdy. Ponadto skrytykował wysiłki mające na celu za wszelką cenę zróżnicowanie sztucznej inteligencji, powołując się na niedawne problemy etyczne na innych platformach.
Otwarty dostęp do Groka to próba Muska wykazania braku stronniczości w systemie i demokratyzacji dostępu do sztucznej inteligencji. Programiści mogą teraz wykorzystywać kod Grok do tworzenia aplikacji i usług AI w bardziej przystępny i przejrzysty sposób.
Wreszcie, Warto wspomnieć, że kod, Architektura sieci neuronowej i przypadki użycia Udostępniono gotowy plik z modelem, który ma rozmiar 296 GB.
Aby przeprowadzić testy z tym modelem, Zalecane jest użycie procesora graficznego z dużą ilością pamięci, chociaż typ wymaganej pamięci nie jest określony. Chociaż statyczna wersja modelu jest publicznie dostępna, opracowywana jest dodatkowa funkcja dla chatbota Grok, która dynamicznie integruje się z nową, pojawiającą się treścią. Ta dynamiczna integracja realizowana jest poprzez współpracę z platformą X/Twitter, umożliwiającą dostęp do nowej wiedzy w czasie rzeczywistym.
Jeśli chcesz dowiedzieć się więcej na ten temat, możesz sprawdzić szczegóły w zakładce następujący link.