Microsoft Phi-4: modello AI piccolo e potente

Microsoft Phi-4: modello AI piccolo e potente

Il nuovo modello Phi-4 di Microsoft ha solo 4 miliardi di parametri, ma supera i modelli più grandi nella risoluzione di problemi matematici.
Microsoft Phi-4: modello AI piccolo e potente
Il nuovo modello Phi-4 di Microsoft ha solo 4 miliardi di parametri, ma supera i modelli più grandi nella risoluzione di problemi matematici.

Microsoft ha dimostrato che la filosofia “più grande è meglio” è sbagliata. Il nuovo modello Phi-4 appartiene alla categoria degli Small Language Model (SLM), ma in alcuni compiti offre prestazioni superiori a quelle di modelli molto più grandi. È attualmente disponibile tramite la piattaforma Azure AI Foundry e sarà accessibile su Hugging Face nei prossimi giorni.

Phi-4 batte GPT, Gemini e Llama

La maggioranza delle aziende che sviluppa modelli di intelligenza artificiale generativa ottiene un incremento delle prestazioni aumentando la dimensione del modello. GPT-4o (OpenAI), Gemini 1.5 Pro (Google) e Llama 3.1 (Meta) hanno dimensioni enormi che richiedono un’elevata potenza di calcolo e quindi consumi elevati.

Phi-4 ha solo 14 miliardi di parametri. Grazie all’uso di dataset di elevata qualità e varie ottimizzazioni post-training, Microsoft ha ottenuto risultati notevoli. Nella risoluzione di problemi matematici supera nettamente Llama 3.3-70B Instruct, Claude 3.5 Sonnet, GPT-4o, GPT-4o mini e Gemini 1.5 Flash. Anche se di poco, le prestazioni sono superiori a quelle di Gemini 1.5 Pro. Phi-4 batte GPT-4o anche in biologia, fisica e chimica.

I principali vantaggi degli SLM sono la velocità di risposta e il costo inferiore. L’addestramento di Phi-4 è stata effettuato principalmente con dati in inglese, ma supporta anche l’italiano. Non è multimodale, quindi supporta unicamente input di testo.

Il predecessore Phi-3.5 mini ha circa 3,8 miliardi di parametri e viene installato sui Copilot+ PC per eseguire localmente le funzionalità AI di Windows 11 24H2.

Fonte: Microsoft
Link copiato negli appunti

Ti potrebbe interessare

Pubblicato il
16 dic 2024
Link copiato negli appunti