Percorso Argento — Modulo: Backtest e Validazione. Parte di Percorso Argento.
Out of Sample (L'Isolamento Statistico)
Se un professore ti fa studiare un libro, ti fa esercitare su dieci domande specifiche e poi, all'esame, ti fa esattamente quelle stesse dieci domande, il tuo 30 e Lode non dimostra che sei un genio: dimostra solo che hai un'ottima memoria.
Nel trading, i dati storici su cui costruisci le regole del tuo metodo (In-Sample) sono le domande di esercitazione. Se valuti la strategia unicamente su quei dati, ti stai auto-ingannando. I dati Out of Sample sono le domande d'esame: una porzione di storico blindata, nascosta, intoccabile, su cui farai girare la strategia solo alla fine per validarla senza poter più modificare nulla.
Come Applicarlo Correttamente
La prassi professionale richiede un'igiene statistica maniacale:
- Il Taglio del Database: Prendi gli ultimi 10 anni di dati. Tieni gli ultimi 3 anni nascosti (Out of Sample).
- Il Laboratorio (In-Sample): Usa i primi 7 anni per testare, aggiustare, aggiungere filtri, calibrare le medie mobili. Mettici tutto il sudore che vuoi.
- Il Sigillo: Una volta completata la strategia, le regole sono scolpite nella pietra. Non puoi più toccare nemmeno una virgola.
- La Sentenza (Out-of-Sample): Esegui la strategia esatta sui 3 anni nascosti. Se le performance reggono (pur con un fisiologico calo tollerabile), hai un sistema. Se la strategia va in perdita cronica, hai "overfittato" il passato (hai studiato a memoria) e devi buttare l'intero progetto.
La Regola d'Oro
Se un sistema fallisce l'Out of Sample, non puoi "aggiustare un parametro" e riprovare sullo stesso Out of Sample. Quel set di dati ormai è "sporco" (lo hai visto). Per essere rigorosi, dovresti usare un set di dati interamente nuovo. Ecco perché proteggere il campione cieco è la base della statistica quantitativa.
Collegamenti
Modulo: Modulo 5 — Backtest e validazione
Smettere di fidarsi di tre trade andati bene.
