OpenAI annuncia o3. Che cosa dice e che cosa non dice un balzo nei test
Annunciato il 20 dicembre 2024 con punteggi notevoli su un test di ragionamento. Annunciato, non rilasciato — e tutto il punto sta in quella distanza.
Il 20 dicembre 2024, chiudendo la serie di annunci quotidiani, OpenAI ha presentato o3 e o3-mini: nuovi modelli di ragionamento, non ancora disponibili in generale, con risultati sul test ARC-AGI molto superiori a quanto riportato finora per un modello linguistico.
ARC-AGI misura il ragionamento astratto sui pattern ed è costruito per risultare facile alle persone e difficile alle macchine. I modelli ci arrancavano da anni. Il balzo riportato è notevole — e la reazione di dicembre corre ben oltre ciò che si sa.
Tre cose da tenere a mente
Annunciato, non consegnato. o3-mini era indicato per le settimane successive e il modello più grande più avanti. Una dimostrazione non è un prodotto che si compra, si mette a budget o si inserisce in un processo.
I punteggi alti sono arrivati con calcolo alto. I risultati più vistosi provengono da una configurazione che consuma un’enorme quantità di calcolo per compito. È un risultato di ricerca, non economico. Per voi conta che cosa faccia la configurazione sostenibile.
Un test resta un test. Risolvere enigmi astratti non è la stessa abilità che leggere il vostro contratto di fornitura o capire perché una consegna sia risultata incompleta. Il progresso sull’uno non si trasferisce automaticamente all’altro.
Che cosa dice invece davvero
Che il plateau riportato a novembre riguardava una leva precisa — l’aumento di scala nel pre-addestramento — e non il progresso in generale. Spendere calcolo al momento della risposta funziona, e funziona più in fretta di quanto molti si aspettassero.
Dice anche che la capacità arriverà a gradini anziché in modo regolare: un argomento a favore di contratti brevi e contro qualsiasi impianto rigido costruito attorno ai limiti di oggi.
La conclusione senza clamore
Nulla nel vostro piano di gennaio dovrebbe cambiare per questo annuncio. Il collo di bottiglia di una PMI svizzera non è la capacità del modello, e non lo è da almeno un anno.
Il collo di bottiglia è sapere quale dei vostri processi valga la pena automatizzare, avere dati abbastanza ordinati da alimentarlo e aver deciso chi controlla il risultato. Queste tre cose sono difficili oggi esattamente come il 19 dicembre, e nessun test le sposterà.