Gli embedding: come le macchine trasformano le parole in geometria
I modelli linguistici non capiscono le parole: le misurano. Dietro la ricerca semantica, i RAG e i sistemi di raccomandazione…
I modelli linguistici non capiscono le parole: le misurano. Dietro la ricerca semantica, i RAG e i sistemi di raccomandazione…
I modelli linguistici rispondono a memoria, e la memoria finisce. Il RAG li trasforma in studenti che consultano il libro…
Ogni modello linguistico comincia spezzando il testo in token, e da trent'anni lo fa con un algoritmo goloso che decide…
La classifica GitHub di questi giorni dice una cosa sola, e la ripete sette volte. Non è più il protocollo…
Dietro ogni modello che "impara" c'è un solo algoritmo, ideato decenni fa. Un viaggio nella backpropagation senza formule pesanti, con…
Addestrare un modello a prevedere come cambia il mondo richiede di solito traiettorie in cui ogni azione è annotata a…
Un nuovo benchmark mette venti compiti di programmazione lunghi e realistici davanti agli agenti CLI più avanzati. Nessuno supera il…
Dentro i modelli linguistici alcuni numeri interni esplodono e alcune parole calamitano l'attenzione: due anomalie che compaiono sempre insieme. Un…
I video generati dall'AI sono spesso bellissimi e fisicamente impossibili: oggetti che cadono verso l'alto, velocità che cambiano dal nulla.…
Balestriero e LeCun sostituiscono la pila di accorgimenti che tiene in piedi il self-supervised learning con un solo principio dimostrabile:…