Meta, precedentemente conosciuta come Facebook, ha recentemente lanciato un nuovo modello linguistico chiamato Llama 2. Questo nuovo modello rappresenta una sfida diretta a GPT-4 di OpenAI e è stato sviluppato in collaborazione con Microsoft. Llama 2, disponibile gratuitamente per scopi commerciali e di ricerca, è stato creato per fornire alle aziende, alle startup e ai ricercatori un accesso più ampio agli strumenti di intelligenza artificiale.
Rispetto al suo predecessore, Llama 1, Llama 2 è stato addestrato su un numero di dati superiore del 40%. È stato addestrato utilizzando una combinazione di dati online pubblicamente disponibili. Esistono due versioni di Llama 2: una generale, che varia da 7 a 70 miliardi di parametri, e una versione ottimizzata per i dialoghi chiamata Llama 2-Chat. Tuttavia, la maggior parte dei dati utilizzati per l’addestramento di Llama 2 sono in lingua inglese, con solo lo 0,11% dei dati in italiano. Questo potrebbe limitare le capacità di Llama 2 in altre lingue.
Il preaddestramento di Llama 2 è stato realizzato utilizzando il supercomputer di Meta chiamato Research SuperCluster, insieme a cluster di produzione interni. Entrambi sono equipaggiati con GPU Nvidia A100. Durante il processo, sono state impiegate 3,3 milioni di ore di GPU, producendo un totale di 539 tonnellate di CO2 equivalente. Llama 2 è un modello open-source e può essere scaricato da chiunque, anche se l’applicazione richiede competenze specifiche e risorse computazionali significative. Per semplificare l’accesso, sarà reso disponibile anche tramite Azure, AWS e Hugging Face.
Inoltre, Qualcomm ha annunciato una collaborazione con Meta per portare Llama 2 su computer portatili, telefoni e visori AR/VR a partire dal 2024. Tuttavia, nonostante possa essere utilizzato per scopi commerciali, ci sono alcune restrizioni sulla sua licenza. Ad esempio, non può essere utilizzato da chi ha più di 700 milioni di utenti mensili, né può essere utilizzato per generare altri modelli linguistici di grandi dimensioni basati su Llama 2. Inoltre, non può essere utilizzato per scopi militari, per il funzionamento di infrastrutture critiche o per attività di bullismo. Meta, insieme ad altre grandi aziende come OpenAI e Google, dimostra la crescente importanza dell’intelligenza artificiale nello sviluppo tecnologico.
Meta e Microsoft è la nuova alleanza: costituito un nuovo enorme mostro high-tech | Ora tutto il Mondo sarà sotto controllo
La società Meta (ex Facebook) ha sviluppato un nuovo modello linguistico chiamato Llama 2 insieme a Microsoft. Questo modello rappresenta una sfida diretta a GPT-4 di OpenAI e offre un accesso più ampio agli strumenti di intelligenza artificiale per aziende, startup e ricercatori. Llama 2 è stato addestrato su un numero di dati superiore del 40% rispetto al suo predecessore ed è disponibile in due versioni: una generale e una specifica per i dialoghi. Tuttavia, la maggior parte dei dati di addestramento è in lingua inglese, con solo lo 0,11% in italiano. Llama 2 è open source e può essere scaricato da chiunque, ma richiede competenze specifiche e risorse computazionali significative. Per facilitarne l’accesso, sarà disponibile anche su piattaforme come Azure, AWS e Hugging Face. Inoltre, Qualcomm collaborerà con Meta per portare Llama 2 su computer portatili, telefoni e visori AR/VR a partire dal 2024. Ci sono alcune restrizioni sull’uso di Llama 2, come il limite di utenti mensili e l’impedimento di utilizzo per scopi militari o per attività di bullismo.
