Codul chatbot Grok-1 a fost lansat în sălbăticie

Codul chatbot Grok-1 a fost lansat în sălbăticie

Codul chatbot Grok-1 a fost lansat în sălbaticul PlatoBlockchain Data Intelligence. Căutare verticală. Ai.

După cum a promis, Elon Musk a lansat modelul din spatele chatbot-ului xAI, Grok-1.

Lansat sub licența Apache 2.0, greutățile modelului de bază și arhitectura de rețea sunt acum disponibile. Modelul are 314 miliarde de parametri și are nevoie de hardware cu suficientă memorie GPU pentru a-l rula. Este ajustat pentru aplicații precum dialogul în limbaj natural și reprezintă punctul de control al modelului de bază brut din faza de pre-antrenament, care s-a încheiat în octombrie 2023.

Criticii au indicat o performanță relativ slabă în benchmark-uri; în timp ce Grok este un model mare, se descurcă prost din ceea ce au văzut unii ingineri. „Având în vedere cât de slab este în comparație cu alte modele, subliniază cu adevărat cât de important este reglarea fină. Modelele cu un număr de parametri MULT mai mic îl depășesc în multe valori”, a spus unul. poster pe forumurile Hacker News aseară.

S-ar putea să descoperi că cu atât mai mic Mistral funcționează la fel de bine ca Grok-1, de exemplu.

Pentru a-i pune dimensiunea perspectivă, chiar și la 314 miliarde de parametri, are încă ceva de-a face cu GPT-4 de la OpenAI, care avea 1.76 trilioane de parametri la ultima numărare.

În mod remarcabil, spre deosebire de LLM-urile existente, care sunt instruite pe date cu un moment limită în timp, Grok are acces la corpus de date în timp real al Xeets-urilor tuturor prin X.com, ceea ce ar trebui să facă unele experimente interesante în zilele următoare, deși ca un alt comentatorul a remarcat: „Datele de tweet de pe Twitter în sine sunt atât extrem de idiosincratice, cât și scurte prin design, ceea ce singur nu este propice pentru formarea unui LLM.”

grok va fi familiar utilizatorilor platformei de socializare a lui Musk, X, iar abonații au putut să pună întrebări chatbot-ului și să primească răspunsuri. Conform xAI, Grok a fost modelat după Ghidul autostopitului pentru galaxie. „Este destinat să răspundă la aproape orice și, mult mai greu, chiar să sugereze ce întrebări să pun.”

Dacă un utilizator parcurge o copie cu urechi de câine a Ghidul autostopul pentru scripturile radio Galaxy, următoarea definiție poate fi găsită în Fit the Tenth: „The Hitchhiker's Guide to the Galaxy este un însoțitor indispensabil pentru toți cei care sunt dornici să dea sens vieții într-un univers infinit de complex și confuz, pentru că, deși nu poate spera să fie util sau informativ în toate problemele, face afirmația liniștitoare că, acolo unde este inexact, este cel puțin definitiv inexacte.

„În caz de discrepanță majoră, realitatea este întotdeauna cea care a înțeles greșit.”

Lansarea vine la prima aniversare de la lansarea modelului OpenAI GPT-4, iar disputa legală a lui Musk cu foștii săi prieteni AI rămâne în fundal. La începutul acestei luni, Musk a dat în judecată OpenAI, susținând că a fost puțin deschis despre companie, în ciuda numelui acesteia. OpenAI răspuns lansând o mulțime de e-mailuri, susținând că Musk era pe deplin conștient de planurile sale și dorea să fie integrat în Tesla.

Patrik Backman, partener general la OpenOcean, a spus despre lansarea Grok-1: „Pentru o dată, Elon Musk își pune principiile în acțiune. Dacă dai în judecată OpenAI pentru transformarea într-o organizație bazată pe profit, trebuie să fii pregătit să adere la aceleași idealuri.”

Ce nu are a fost lansat de xAI este, de asemenea, de remarcat. Greutățile Grok-1 sunt disponibile, dar datele folosite pentru antrenament nu sunt disponibile sub aceeași licență, ceea ce a determinat expertul AI Gary Marcus să epigramă: „ParțialOpenAI.”

Instrumentele AI generative de aprovizionare deschisă s-au dovedit controversate. Unii dezvoltatori își fac griji că punerea la dispoziție a tehnologiei riscă să abuzeze, iar alții indică beneficiile inerente ale transparenței.

meta comun - un fel de – modelele sale Llama 2 de anul trecut, iar alte companii au urmat exemplul. OpenAI, pe de altă parte, cu siguranță nu.

Prin deschiderea greutăților din spatele lui Grok-1, Musk încearcă să planteze un steag în tabăra opusă lumii proprietare OpenAI.

În ceea ce privește performanța sa supremă, ca tot ceea ce atinge Musk, ar putea merge în orice direcție. ®

Timestamp-ul:

Mai mult de la Registrul