Reverse Engineering AI Per un'ingegneria inversa dell'AI

The Epistemic Inversion L'inversione epistemica

Mirko Bradley — mirkobradley.com

There is a peculiarity in the history of technology that has gone strangely unnoticed. Every tool humanity has ever built was understood before it was used. When we invented the wheel, the steam engine, or the transistor, we knew exactly what we were creating because we had designed it. Understanding came first. The engineer's knowledge was complete by definition.

C'è una peculiarità nella storia della tecnologia che è passata quasi inosservata. Ogni strumento che l'umanità ha costruito nel tempo è stato compreso prima di essere usato. Quando abbiamo inventato la ruota, la macchina a vapore, il transistor, sapevamo cosa stavamo costruendo, perché li avevamo progettati. La comprensione precedeva la costruzione. La conoscenza dell'ingegnere era totale, per definizione.

Large language models have shattered that rule. For the first time in history, we have built something we do not understand. Not in the ordinary sense that complex systems have emergent properties. Every engineer accepts that. This is deeper. The internal structure of a trained model is opaque even to the people who trained it. No one designed the structures that form inside these artificial neural networks. No one planned that certain directions in activation space would behave like emotional states, or that the geometry of concepts would mirror findings from human neuroscience. These structures were discovered, not engineered.

I modelli linguistici di grandi dimensioni (LLM) hanno rotto questa regola. Per la prima volta nella storia, abbiamo costruito qualcosa che non capiamo. Non nel senso banale che i sistemi complessi hanno proprietà emergenti, cosa che ogni ingegnere accetta, ma in un senso più profondo, per cui la struttura interna di un modello addestrato è opaca alle stesse persone che lo hanno addestrato. Nessuno ha progettato le strutture che si formano all'interno di una rete neurale artificiale. Nessuno ha specificato che certe direzioni nello spazio delle attivazioni avrebbero corrisposto a qualcosa di analogo a stati emotivi o che la geometria dei concetti avrebbe rispecchiato alcuni risultati delle neuroscienze umane. Queste strutture sono state trovate, non pianificate.

This is the epistemic inversion: construction no longer guarantees comprehension. We built the system, but now we must study it the way we study a natural object: a crystal, an organism, a brain, or the evolution of species. The tools we need are those of reverse engineering, not forward design. We are digging into something we assembled from the inside, but can only explore from the outside.

Questa è l'inversione epistemica: la costruzione non garantisce più la comprensione. Abbiamo costruito il sistema, ma dobbiamo ora studiarlo come studieremmo un oggetto naturale, un cristallo, un organismo, un cervello, l'evoluzione delle specie. Gli strumenti che usiamo sono gli strumenti del reverse engineering e non quelli della progettazione. Scaviamo dall'esterno qualcosa che abbiamo assemblato dall'interno.

The implications are both technical and conceptual. When a system produces structures that no one designed, the question of what those structures actually are becomes genuinely open. Chris Olah, who leads mechanistic interpretability at Anthropic, put it starkly in the Vatican in May 2026: we are finding things that feel mysterious, even unsettling. Internal states that functionally mirror joy, satisfaction, and fear. "I don't know what that means," he said.

Le conseguenze sono tecniche e concettuali. Se un sistema produce strutture che nessuno ha progettato, la domanda su cosa siano quelle strutture diventa genuinamente aperta. Chris Olah, che guida il team di mechanistic interpretability di Anthropic, lo ha detto chiaramente in Vaticano nel maggio 2026: troviamo cose che sono misteriose, persino inquietanti, stati interni che rispecchiano funzionalmente gioia, soddisfazione e paura. "Non so cosa significhi", ha detto.

That sentence, coming from someone deep inside the system, is the clearest possible statement of the epistemic inversion. The builder no longer knows what he has built. Not out of carelessness, but because the process of building and the process of understanding have come apart. Once they were the same process. Now they are not.

Quella frase, pronunciata dall'interno del sistema, è la formulazione più chiara possibile dell'inversione epistemica. Il costruttore non sa cosa ha costruito. Non per negligenza, ma perché il processo di costruzione e il processo di comprensione si sono separati. Una volta erano lo stesso processo, ora non lo sono più.

This series is a first attempt to bridge that gap, or at least to begin mapping it with clarity and precision.

Questa serie è un primo tentativo di colmare quel divario o almeno di cominciare a mapparlo con precisione.

Structures Nobody Designed → Strutture che nessuno ha progettato →