Grok, el chatbot d'IA de Twitter/X, ara és de codi obert
xAI (a empresa cofundada per Elon Musk, recolzada amb al voltant de mil milions de dòlars per al desenvolupament de tecnologies relacionades amb la intel·ligència artificial), va donar a conèixer fa poc la notícia sobre la seva decisió d'alliberar el codi font de Grok el seu LLM que s'utilitza en un chatbot integrat a la xarxa social X (Twitter).
grok ha estat prèviament entrenat utilitzant una extensa col·lecció de dades de text utilitzant la pila daprenentatge patentada de xAI. Posseeix aproximadament 314 mil milions de paràmetres, cosa que el converteix en el model de llenguatge obert més gran disponible actualment.
Grok ja és open source
Recentment, Eleon Musk va anunciar que Grok es convertiria en codi obert, cosa que ja ha passat. Això significa que els desenvolupadors de tot el món poden observar el funcionament intern de Grok i fer-lo servir per impulsar els seus propis models d'intel·ligència artificial.
El sistema de xatbot d'intel·ligència artificial Grok, desenvolupat per la companyia xAI d'Elon Musk, va ser llançat als usuaris nord-americans de la plataforma de xarxes socials X al desembre. Grok està dissenyat per competir amb els principals sistemes d'intel·ligència artificial del mercat, com ara els de Google i, especialment, OpenAI. El que distingeix Grok dels seus competidors és la seva capacitat per incorporar humor i tons sarcàstics, inspirats en els ordinadors amb intel·ligència artificial dels famosos llibres de la Guia de l'autoestopista galàctic.
La versió oberta del model Grok-1 es publica en una representació bàsica i no inclou optimitzacions específiques per a certes àrees dús, com lorganització de sistemes de diàleg. Aquest model compta amb aproximadament 314 mil milions de paràmetres i ha estat entrenat des de zero per xAI utilitzant una pila d´entrenament personalitzada basada en JAX i Rust. xAI ha deixat clar que estan llançant els pesos i l'arquitectura del model sota la llicència Apache 2.0, cosa que en permet l'ús comercial. Tot i això, és important destacar que aquesta versió no inclou les dades utilitzades per entrenar el model de llenguatge gran d'IA ni ofereix accés a dades en temps real.
L'enfocament de codi obert de Grok podria ressaltar les seves febleses, però Musk és un defensor del codi obert i ha estat un inversor a OpenAI. Tot i això, actualment està demanant OpenAI de manera controvertida, argumentant que l'empresa s'ha desviat dels seus principis fundacionals d'obertura cap a una recerca de rendibilitat. Els advocats de Musk fins i tot suggereixen que OpenAI està mantenint en secret parts del sistema d'intel·ligència artificial GPT-4 al mercat.
Musk ha expressat la seva opinió sobre la importància de la transparència i la cerca de la veritat en la intel·ligència artificial. Ha esmentat que encara que encara hi ha feina per fer, la seva plataforma X és la més transparent i cerca la veritat. A més, ha criticat els esforços per fer que la IA sigui diversa sigui com sigui, esmentant problemes ètics recents en altres plataformes.
L'accés obert a Grok és un intent de Musk per demostrar la manca de biaixos al sistema i democratitzar l'accés a la intel·ligència artificial. Els desenvolupadors ara poden aprofitar el codi de Grok per crear aplicacions i serveis de IA de manera més accessible i transparent.
Finalment, cal esmentar que el codi, l'arquitectura de la xarxa neuronal i els casos d'ús s'ha posat a disposició un fitxer llest per utilitzar amb el model, que té una mida de 296 GB.
Per fer proves amb aquest model, es recomana fer servir una GPU amb una gran quantitat de memòria, encara que no s'especifiqui el tipus de memòria requerida. Mentre que una versió estàtica del model està disponible públicament, es desenvolupa una característica addicional per al chatbot Grok que s'integra dinàmicament amb nou contingut emergent. Aquesta integració dinàmica s'aconsegueix a través de la col·laboració amb la plataforma X/Twitter i permet accedir a nous coneixements en temps real.
Si estàs interessat en conèixer més sobre això, pots consultar els detalls al següent enllaç.