GUIDA · LLM ON PREM

Aggiornare i modelli senza sorprese: versioning e test di regressione

Un nuovo modello, un nuovo prompt o una nuova dipendenza possono cambiare il comportamento del servizio da un giorno all'altro. Questa guida spiega come tenere sotto controllo gli aggiornamenti: versioni chiare, un insieme di test ripetibile, un processo di approvazione e un piano per tornare indietro. Alla fine saprai come pianificare il prossimo cambiamento.

Aggiornata a ottobre 2026
7 min di lettura
Redazione Tecnica Altovar

1. Perché un aggiornamento è un rischio

Nel software tradizionale un aggiornamento cambia il codice, e il risultato è in buona parte prevedibile. In un LLM un cambiamento può modificare il comportamento in modi meno evidenti: una risposta che prima era corretta ora non lo è più, un tono diverso, una citazione di un documento sbagliato. Gli errori non sempre producono messaggi di errore, e questo rende più difficile accorgersene.

Il problema cresce con il tempo. Gli utenti costruiscono abitudini attorno al comportamento che conoscono, e un cambio improvviso può essere percepito come un guasto anche quando il nuovo modello è migliore in media. Per questo ogni aggiornamento va trattato come un rilascio, con preparazione, verifica e comunicazione. Un cambiamento fatto senza avviso è più difficile da spiegare e da recuperare.

2. Cosa costituisce una versione

Una versione del servizio non è solo il nome del modello. Include il modello con il suo formato di precisione, il prompt di sistema, i parametri di generazione, la configurazione del recupero dei documenti e le regole di filtro. Se uno di questi elementi cambia, cambia il comportamento. Registrare solo il nome del modello significa non sapere mai con certezza cosa sia realmente in produzione.

Assegna a ogni versione un identificativo, una data, una descrizione del cambiamento e il nome della persona che l'ha approvata. Conserva il file di configurazione o il riferimento allo storage dei pesi, in modo che la versione possa essere ricostruita. Senza questi dati, diagnosticare un problema diventa un lavoro di ricostruzione, e il confronto con la versione precedente non è affidabile.

3. Costruire un insieme di test di regressione

Un test di regressione è un insieme di domande fisse con risposte giudicate corrette o accettabili, eseguito ogni volta che qualcosa cambia. Non garantisce che il sistema sia perfetto, ma mostra se alcune cose che funzionavano non funzionano più. Le domande devono coprire i casi d'uso reali, compresi quelli difficili e quelli in cui un errore costerebbe di più. Un insieme che copre solo i casi facili non dice nulla sul comportamento reale.

Costruisci l'insieme con chi conosce il lavoro: raccogli domande vere, anonimizzate dove serve, e fai decidere agli esperti cosa conta come risposta corretta. Un insieme che non cambia mai finisce per misurare solo ciò che il sistema sa già fare, quindi aggiornalo quando emergono casi nuovi in produzione. Ogni domanda deve avere una ragione chiara per stare nell'insieme, e chi la propone la motiva. Includi in particolare:

  • Domande semplici e frequenti, che devono restare sempre corrette
  • Domande con documenti lunghi o con più fonti da combinare
  • Casi in cui il sistema deve rifiutarsi di rispondere o chiedere chiarimenti
  • Domande su dati sensibili, per verificare che i controlli di accesso tengano
  • Casi già falliti in passato, per evitare che ritornino

4. Il processo di approvazione

Un processo semplice basta, purché sia scritto e rispettato. Il punto cruciale è che nessun cambiamento va in produzione senza che il responsabile del servizio l'abbia visto e approvato per iscritto. I passaggi seguenti descrivono un flusso generico. Adattalo alla dimensione dell'organizzazione, ma non eliminare il confronto tra la versione attuale e quella proposta. Se il processo è troppo lungo per il cambiamento che stai facendo, semplificalo, ma non saltarlo.

Ogni passaggio deve lasciare una traccia. Chi propone il cambiamento, chi lo esegue, chi lo verifica e chi lo approva devono essere distinti quando possibile, e la data di ogni decisione va conservata nel fascicolo del progetto insieme ai risultati dei test. Questo serve sia a gestire gli incidenti sia a rispondere a un controllo interno. Un registro semplice, tenuto con ordine, vale più di un sistema complicato che nessuno aggiorna.

  1. Descrivi il cambiamento e il motivo, indicando cosa ci si attende di migliorare e cosa potrebbe peggiorare.
  2. Prepara la nuova versione in un ambiente di prova con la stessa configurazione prevista in produzione.
  3. Esegui il test di regressione sulla versione attuale e su quella proposta, e confronta i risultati caso per caso.
  4. Analizza le differenze: i miglioramenti attesi ci sono, e i peggioramenti sono accettabili per il servizio?
  5. Verifica gli aspetti di sicurezza, come accessi, log e filtri, e registra l'esito.
  6. Ottieni l'approvazione scritta del responsabile del servizio, con versione e data.
  7. Pianifica il rilascio in una finestra concordata e comunica agli utenti cosa cambia e cosa fare in caso di problemi.
  8. Mantieni la versione precedente disponibile per il rollback per il tempo stabilito.

5. Rilascio graduale e rollback

Un rilascio graduale riduce il rischio. Puoi aprire la nuova versione a un gruppo ristretto di utenti, osservare il comportamento per un periodo sufficiente e poi estendere l'accesso. Se qualcosa non va, solo una parte di utenti è coinvolta e il ritorno alla versione precedente è più semplice da gestire. Se la versione nuova mostra un problema, la fermata deve essere immediata, senza discussioni lunghe.

Il rollback deve essere provato prima, non improvvisato. Verifica che la versione precedente possa essere riattivata in tempi brevi, che i dati prodotti dalla nuova versione siano gestiti in modo coerente e che il team sappia farlo senza l'aiuto di chi ha preparato il cambiamento. Dopo il rilascio, confronta l'andamento con il test di regressione e con le segnalazioni, per confermare che il cambiamento abbia prodotto l'effetto atteso.

6. Errori comuni

Il primo errore è aggiornare sotto pressione, perché una nuova versione è stata annunciata o perché il vecchio modello non è più supportato. Ogni cambiamento va valutato con i propri criteri, anche quando la pressione è forte. Il secondo è valutare la nuova versione solo con qualche prova informale, che non copre i casi difficili e non lascia traccia da confrontare.

Il terzo errore è cambiare più cose insieme: modello, prompt e parametri nello stesso rilascio. Quando qualcosa va storto non si capisce cosa lo ha causato. Cambia una cosa alla volta, o almeno documenta l'insieme in modo che sia possibile separare gli effetti. Il quarto è non aggiornare mai l'insieme di test, che finisce per diventare obsoleto e dà un falso senso di sicurezza.

7. Come iniziare

Il primo passo utile questa settimana è dare un nome alla versione attuale e annotarne i componenti: modello, formato di precisione, prompt, parametri e configurazione del recupero documenti. Se qualche elemento non è noto, chiedilo al fornitore e segnalalo come punto aperto. Senza questa fotografia nessun confronto futuro è affidabile. Una volta scritta, la fotografia va aggiornata a ogni rilascio, non solo la prima volta.

Poi raccogli un primo gruppo di domande reali con le risposte corrette, e definisci chi deciderà se una nuova risposta è accettabile. Con questo strumento potrai valutare il prossimo cambiamento in modo ripetibile, invece di affidarti all'impressione di chi lo ha provato per primo. Chiedi anche a chi ti affianca di rileggere le domande e di segnalare cosa manca, perché un insieme scritto da una sola persona riflette solo il suo punto di vista.

Domande frequenti

Devo aggiornare il modello appena esce una versione nuova?

No, non per obbligo. Una versione più recente può essere migliore in alcuni compiti e peggiore in altri. Valuta il cambiamento sul tuo insieme di test, con le tue domande, e decidi in base al risultato. Un ritardo motivato è una scelta legittima, purché sia documentato e non diventi l'abitudine a usare componenti non più supportati.

Quanto deve essere grande l'insieme di test?

Abbastanza da coprire i casi d'uso principali e quelli critici, e abbastanza piccolo da essere eseguito ogni volta senza fatica. Non esiste una dimensione standard. Conta di più la qualità delle domande e la chiarezza su cosa è una risposta corretta. Aggiorna l'insieme con regolarità, aggiungendo i casi che emergono in produzione.

Come confronto due versioni in modo equo?

Usa le stesse domande, le stesse condizioni di configurazione e gli stessi criteri di valutazione. Non cambiare il prompt insieme al modello nel confronto, altrimenti non sai cosa ha prodotto la differenza. Registra i risultati caso per caso, non solo la media, perché una media può nascondere un peggioramento su un compito importante.

Il rollback cancella il lavoro fatto con la nuova versione?

Dipende da cosa è stato memorizzato. Se la nuova versione ha prodotto dati, documenti indicizzati o log, questi devono essere gestiti in modo esplicito. Prima del rilascio definisci cosa succede a questi elementi in caso di ritorno indietro, e verifica la procedura con una prova.

Chi deve approvare un aggiornamento?

Il responsabile del servizio, con il contributo di chi conosce il dominio e di chi si occupa di sicurezza e protezione dei dati quando il cambiamento tocca quei temi. Il fornitore prepara e documenta il cambiamento, ma l'approvazione resta una decisione interna. Conserva l'approvazione per iscritto insieme ai risultati dei test.

Nota sul contenuto

Guida informativa di carattere generale. Norme e requisiti tecnici cambiano nel tempo: verifica sempre le fonti ufficiali e valuta il tuo caso specifico con un consulente tecnico o legale qualificato.

CONTATTACI

Parla con il nostro team.

Mostriamo come Altovar si integra nella tua infrastruttura. Nessun impegno, nessun sales pitch. Solo una conversazione tecnica.

PRENOTA UNA DEMO →