Quanto spesso vi è capitato di leggere una risposta di un’IA e pensare: «Ma questo qui ha mangiato un dizionario di termini aziendali?»
Se usate Claude per farvi scrivere del codice o per analizzare dei log, avrete notato che c’è un certo «stile». Non è solo questione di cortesia eccessiva; c’è un sottofondo di parole e strutture linguistiche che sembrano fungere da vera e propria impalcatura per il suo ragionamento. È quello che l’autore del post su Hacker News chiama «load-bearing vocabulary», ovvero un vocabolario che non serve solo a comunicare, ma a sostenere la logica stessa del modello.
L’articolo di Louisa Abraham mette a nudo un aspetto che spesso ignoriamo mentre corriamo dietro all’ultimo benchmark di performance. L’idea è che certi termini e modi di connettere i concetti non siano semplici decorazioni, ma elementi strutturali. Se togli quelle piccole ‘colle’ linguistiche, il castello di carte del ragionamento del modello rischia di crollare. È un po’ come quando in un progetto legacy trovi quella funzione scritta male che però, per qualche motivo mistico, tiene in piedi l’intera architettura del database.
Per noi che amiamo smontare le cose per vedere come sono fatte, questo è oro colato. Non stiamo parlando di questioni legali o di regolamentazioni europee che spesso sembrano scritte da gente che non ha mai aperto un terminale, ma di pura analisi linguistica applicata ai pesi di una rete neurale. È un tentativo di capire dove finisce la capacità di calcolo e dove inizia la ‘personalità’ (o meglio, il pattern statistico) del modello.
Certo, c’è da essere onesti: siamo ancora nel pieno di una corsa all’armamento dove tutti vogliono convincerci che il prossimo aggiornamento cambierà la storia. Ma invece di guardare solo quanto velocemente risponde il bot, questo tipo di analisi ci invita a guardare sotto il cofano. È un approccio meno ‘marketing’ e molto più ‘engineering’.
In definitiva, è un pezzo che merita un salto, specialmente se vi piace l’idea che la prossima grande rivoluzione nell’IA non sia solo nei parametri, ma nel modo in cui le parole si incastrano tra loro per creare l’illusione di un pensiero coerente. Un po’ come i vecchi script Bash che sembrano un ammasso di caos ma che, se toccati, fanno saltare tutto il server.