Llama este unul dintre puținele modele de limbaj avansate care pot fi folosite liber. Meta pretinde că depășește GPT 3.5 și altele în mai multe teste
Meta a avut nevoie de mai puțin de un an pentru a-și îmbunătăți modelul de limbaj de formă lungă, „motorul” pe care aplicațiile de inteligență artificială, precum chatboții, îl folosesc pentru a înțelege întrebările și a dezvolta răspunsuri. Llama 3, anunțat astăzi, promite să îmbunătățească semnificativ calitatea răspunsurilor oferite de Llama 2, lansat vara trecută, cu o pregătire mult mai extinsă și cu capacitatea de a înțelege întrebări mai lungi și de a reține mai multe informații în fiecare sesiune.
Modelul de limbă, care, la fel ca predecesorul său, este disponibil gratuit și poate rula local, a fost antrenat folosind mai mult de 15 miliarde de jetoane (aproximativ echivalentul a 15 miliarde de cuvinte de text), de șapte ori mai multe decât cele utilizate în antrenamentul Llama. 2. Rezultatul este un model care în unele cazuri depășește Gemini Pro 1.5 sau GPT 3.5, modelele folosite de Google chatbot (Gemini) și, respectiv, OpenAI (ChatGPT).
Meta oferă două versiuni: una cu 8 miliarde de parametri și cealaltă cu 70 de miliarde de parametri. Mai mulți parametri permit instrumentelor AI să ofere răspunsuri mai complexe și mai detaliate, dar necesită și mai multă memorie și putere de procesare pe mașina care le rulează. Compania asigură că va oferi în curând versiuni intermediare (de exemplu, Llama 2 era disponibil în trei dimensiuni).
Dintre marile companii de tehnologie, Meta este singura care își face modelul disponibil pentru descărcare și în mod deschis, deși cu unele restricții. Google are o versiune open source a Gemini, Gemma, deși este mai limitată, iar OpenAI oferă acces gratuit la modelele sale unor instituții de învățământ, dar nu permite descărcarea directă a diferitelor versiuni de GPT.
„Când am creat Llama 3, ne-am propus să creăm cel mai bun model deschis, care este la egalitate cu cele mai bune modele proprietare disponibile astăzi”, explică compania.
Pe lângă faptul că este disponibil pentru descărcare directă, Llama 3 va fi disponibil și pe AWS, Google Cloud, Hugging Face, Microsoft Azure și alte servicii cloud.