Cos’è un modello linguistico (LLM) e perché sta cambiando tutto

Negli ultimi anni strumenti come ChatGPT hanno cambiato il modo in cui interagiamo con la tecnologia. Oggi possiamo chiedere a un sistema di scrivere un testo, spiegare un concetto, tradurre una lingua o persino generare codice.

Alla base di questi sistemi ci sono i modelli linguistici di grandi dimensioni, chiamati LLM (Large Language Models). Sono il cuore della rivoluzione dell’intelligenza artificiale generativa.

Se vuoi capire meglio il contesto dell’AI generativa puoi partire da questa guida:
Cos’è l’AI generativa

Cosa sono i modelli linguistici

Un modello linguistico è un sistema di intelligenza artificiale progettato per prevedere il linguaggio.

In pratica cerca di rispondere a una domanda molto semplice:

Qual è la parola più probabile che viene dopo?

Per esempio nella frase:

“Il sole sorge a…”

la parola più probabile è est.

Un LLM fa esattamente questo, ma su una scala enorme. Analizza miliardi di frasi e impara le probabilità con cui le parole compaiono insieme.

Quando scriviamo una domanda il modello genera la risposta prevedendo una parola dopo l’altra.

Per capire meglio cosa sia davvero l’intelligenza artificiale puoi leggere anche:

Cos’è davvero l’intelligenza artificiale

Come vengono addestrati

Dataset

Gli LLM vengono addestrati su enormi raccolte di testi provenienti da fonti diverse:

• libri
• articoli
• siti web
• forum
• documentazione tecnica
• codice

Questi dataset possono contenere centinaia di miliardi di parole.

Training

Durante il training il modello analizza i testi e impara a predire la parola successiva. Questo processo viene ripetuto miliardi di volte.

Ogni errore serve ad aggiornare i parametri interni del modello per migliorare la precisione.

Parametri

I parametri sono le variabili interne che il modello usa per rappresentare ciò che ha imparato.

I modelli più grandi possono avere centinaia di miliardi di parametri.

Architettura Transformer

La svolta che ha reso possibili gli LLM moderni è arrivata con l’architettura Transformer.

Questo sistema permette al modello di analizzare tutte le parole di una frase contemporaneamente attraverso un meccanismo chiamato attenzione.

In questo modo il modello riesce a capire quali parole sono più importanti nel contesto di una frase.

Cosa possono fare gli LLM

Una volta addestrati, i modelli linguistici possono svolgere molti compiti diversi:

• scrivere testi
• programmare
• tradurre lingue
• riassumere informazioni
• spiegare concetti complessi

Molti strumenti digitali oggi sono basati su LLM. Puoi vedere alcuni dei più utilizzati qui:

I migliori strumenti di intelligenza artificiale

I limiti degli LLM

Allucinazioni

I modelli linguistici possono inventare informazioni plausibili ma false. Questo fenomeno viene chiamato hallucination.

Errori

Poiché funzionano tramite probabilità, gli LLM possono generare errori o citare fonti inesistenti.

Comprensione apparente

Gli LLM non comprendono davvero il mondo. Non hanno esperienza diretta della realtà ma generano linguaggio basandosi su pattern statistici.

Riflessione finale

I modelli linguistici stanno diventando una nuova interfaccia tra gli esseri umani e la conoscenza.

Per la prima volta possiamo dialogare con sistemi capaci di sintetizzare enormi quantità di informazioni e trasformarle in linguaggio naturale.

Questo cambia il modo in cui accediamo al sapere: non cerchiamo solo informazioni, ma iniziamo a parlare con la conoscenza.

Ma se l’accesso alla conoscenza passa attraverso modelli addestrati da grandi aziende e algoritmi che non controlliamo, allora cambia anche il modo in cui interpretiamo il mondo digitale.

Gli LLM non sono solo strumenti: stanno diventando uno dei nuovi filtri attraverso cui comprendiamo la realtà online.