xAI, я публикую исходный код Грока, LLM, используемого в чат-боте X.  

грок

Grok, чат-бот Twitter/X с искусственным интеллектом, теперь с открытым исходным кодом

хАИ (компания, соучредителем которой является Илон Маск, получившая около миллиарда долларов на разработку технологий, связанных с искусственным интеллектом), недавно опубликовала новость о своем решении выпустить исходный код Grok их LLM, который используется в чат-боте, интегрированном в социальную сеть X (Twitter).

Grok был предварительно обучен с использованием обширной коллекции данных текста с использованием собственного стека обучения xAI. Он имеет около 314 миллиардов параметров, что делает его крупнейшей доступной в настоящее время моделью открытого языка.

Grok теперь с открытым исходным кодом

Недавно Элеон Маск объявил, что Grok станет open source, что уже произошло. Это означает, что разработчики по всему миру могут наблюдать за внутренней работой Grok и использовать его для создания собственных моделей искусственного интеллекта.

Система чат-ботов с искусственным интеллектом Grok, разработанная компанией xAI Илона Маска. был выпущен для американских пользователей платформы социальных сетей X в декабре. Grok призван конкурировать с основными системами искусственного интеллекта на рынке, такими как системы Google и особенно OpenAI. Что отличает Грока от его конкурентов, так это его способность сочетать юмор и саркастические тона, вдохновленные компьютерами с искусственным интеллектом из знаменитых книг «Автостопом по Галактике».

Открытая версия модели Грок-1 выпущен в базовом исполнении и не включает в себя специфических оптимизаций. для определенных областей использования, например, для организации диалоговых систем. Эта модель Он имеет около 314 миллиардов параметров. и прошел обучение с нуля в xAI использование специального стека обучения на основе JAX и Rust. Компания xAI ясно дала понять, что выпускает модели и архитектуру по лицензии Apache 2.0, что позволяет использовать их в коммерческих целях. Однако важно отметить, что эта версия не включает данные, используемые для обучения большой языковой модели искусственного интеллекта, и не предлагает доступа к данным в реальном времени.

Подход Грока с открытым исходным кодом может подчеркнуть его слабые стороны, но Маск является сторонником открытого исходного кода и инвестором OpenAI. Несмотря на это, в настоящее время он подает в суд на OpenAI, утверждая, что компания отклонилась от своих основополагающих принципов открытости в сторону стремления к прибыльности. Юристы Маска даже предполагают, что OpenAI хранит в секрете от рынка части своей системы искусственного интеллекта GPT-4.

Маск высказал мнение о важности прозрачности и поиска истины в искусственном интеллекте. Вы упомянули, что, хотя еще есть над чем поработать, ваша платформа X наиболее прозрачна и ищет истину. Кроме того, он раскритиковал усилия по обеспечению разнообразия ИИ любой ценой, ссылаясь на недавние этические проблемы на других платформах.

Открытый доступ к Гроку — это попытка Маска продемонстрировать отсутствие предвзятости в системе и демократизировать доступ к искусственному интеллекту. Теперь разработчики могут использовать код Grok для создания приложений и сервисов искусственного интеллекта более доступным и прозрачным способом.

Наконец, Стоит отметить, что код, Архитектура нейронной сети и варианты использования Вместе с моделью доступен готовый к использованию файл размером 296 ГБ.

Чтобы выполнить тесты с этой моделью, Рекомендуется использовать графический процессор с большим объемом памяти., хотя тип необходимой памяти не указан. Статическая версия модели общедоступна, но для чат-бота Grok разрабатывается дополнительная функция, которая динамически интегрируется с новым появляющимся контентом. Эта динамическая интеграция достигается за счет сотрудничества с платформой X/Twitter, обеспечивающей доступ к новым знаниям в режиме реального времени.

Если вам интересно узнать об этом больше, вы можете проверить подробности в по следующей ссылке.