Компанія xAI під керівництвом Ілона Маска відкрила вихідний код мовної моделі Grok-1. Ця подія була анонсована 11 березня, а тепер код доступний на майданчику GitHub. Опубліковано базову модель та мережеву архітектуру Grok-1. Модель навчена за методом Mixture-of-Experts на великому обсязі текстових даних із 314 мільярдами параметрів. Це «контрольна точка» необробленої моделі за підсумками навчання, що завершено у жовтні 2023 року. Модель не налаштована для певної програми, наприклад, для діалогів.
Раніше чат-бот на основі моделі Grok був запущений для передплатників X Premium Plus, але не мав великого успіху. Нещодавно Ілон Маск подав до суду на OpenAI із претензіями щодо закритого коду ШІ GPT-4, що суперечить статутним документам компанії. За твердженням Маска, компанія OpenAI стала працювати виключно в комерційних інтересах Microsoft. Також Маск критикував інші компанії, які ведуть закриті розробки у сфері ШІ. Можливо, відкриття коду Grok є певним публічним кроком для підтримки позиції Маска. Також це спроба привернути увагу до розробки xAI для можливої популяризації та розвитку моделі Grok.
Джерело:
The Verge