Parte 4: Provare in modo onesto · Capitolo 14 di 14 · 17 min
Un backtest raccontato due volte, errori, riferimento, glossario e test finale
La stessa regola raccontata in due modi: «+58 R, drawdown 6 R, fattore di profitto 2,4» e «la migliore di 480, +0,74 ± 0,43 R, caso +0,28, fuori campione +0,43 ± 0,73 su 25 operazioni, walk-forward +0,16 ± 0,33, prova del protocollo +0,12 ± 0,73: interessante e non provata». Poi gli errori più frequenti in ordine di capitolo, il riferimento rapido con regole e misure, il glossario e un test finale di 15 domande.
Un backtest raccontato due volte
Prendiamo la regola più bella della griglia (breakout a 80 candele, stop 1,5 ATR, obiettivo 3 R, durata 48).
Il racconto che si fa in una presentazione. «Backtest di dieci mesi sull'oro: +58,1 R in 79 operazioni, drawdown massimo 6,1 R, fattore di profitto 2,37, positiva in tutti e cinque i periodi, e i vicini sono tutti positivi.» Tutto vero, e senza una parola per giudicarlo.
Il racconto onesto. La stessa regola, con tutti i numeri del libro:
| Domanda | Risposta (capitolo) |
|---|---|
| Quante regole sono state provate? | 480: è la migliore (2) |
| Che cosa dà il caso per 480 prove? | Su serie casuali la migliore vale +0,28 R (massimo +0,53); con blocchi di 10 giorni +0,53 (massimo +0,80) (3, 9) |
| Quanto resta, togliendo la selezione? | Circa +0,45 R, con limite basso +0,02 (9) |
| Quanti gradi di libertà? | Cinque parametri su 55 operazioni (11 per parametro) (4) |
| Che cosa fa fuori campione? | +0,82 → +0,43 ± 0,73 su 25 operazioni (5) |
| E con riottimizzazione mensile? | Walk-forward +0,16 ± 0,33 su 96 operazioni; con finestre diverse da −0,13 a +0,45 (6) |
| Ci sono errori di tempo? | No, con ingresso alla chiusura e prova del ritardo; con l'errore la stessa idea darebbe +0,83 (7) |
| Esecuzione? | Stop larghi: nessuna candela ambigua; costo da 0 a 2 $ lascia +0,75 → +0,68 (8) |
| Batte il caso? | Valore p della singola regola sotto 1 su 300; contro blocchi di 10 giorni 1 serie su 150 la supera (9, 10) |
| Robusta? | Vicini +0,28/+0,66 (58%), come la migliore del rumore (0,52); la riga N = 80 spicca (11) |
| Stabile nel tempo? | Positiva in ogni periodo ma il primo fa il 48%; due mesi su dieci fanno +29,7 R su +58,1 (12) |
| Prova unica del protocollo? | Scelta +0,53 ± 0,50; prova +0,12 ± 0,73 su 23 operazioni: inconcludente (13) |
Leggere il grafico a parole
Grafico giornaliero dell'oro con, sotto, quattro curve di R cumulato: la migliore di 480 molto in alto, la scelta del protocollo e il walk-forward più in basso, la regola di esempio vicina a zero, e una fascia grigia sull'ultimo terzo.
| Quando | Cosa | Prezzo |
|---|---|---|
| 24 giu 2026 → 5 ott 2026 | seconda parte |
Orari in UTC.
La regola non è né «un sistema» né «un caso». È un risultato interessante e non provato: in questo campione i breakout a lungo raggio hanno fatto meglio di quanto il caso renda plausibile, ma con poche operazioni, un solo strumento, un regime favorevole (capitolo 12) e un guadagno che si dimezza fuori campione. È il tipo di risultato che merita una prova in avanti con rischio piccolo e regole scritte prima, non un conto reale. La differenza tra i due racconti non è nei dati: è nella quantità di domande a cui si risponde.
Gli errori più comuni
| Errore | Capitolo |
|---|---|
| Scrivere la regola dopo aver visto il grafico; leggere la somma di R senza operazioni ed errore | 1 |
| Presentare la migliore come «il sistema»; contare cinque regole quasi uguali come cinque conferme | 2 |
| Dire «ho provato solo tre regole» quando sono le sopravvissute; confrontare la migliore con zero invece che con il massimo del caso | 3 |
| Aggiungere un filtro «perché migliora il backtest»; dire che la regola ha un parametro dopo aver scelto tra dieci | 4 |
| Ritoccare la regola finché regge fuori campione; dividere a caso invece che nel tempo | 5 |
| Provare finestre di scelta e riportare la migliore; confrontare il walk-forward con la regola scelta guardando tutto | 6 |
| Fidarsi di un risultato eccezionale perché «il codice è corretto»; entrare all'apertura di una candela il cui segnale usa la chiusura | 7 |
| Scegliere l'ipotesi per le candele ambigue dopo aver visto il risultato; provare uno stop stretto su candele orarie | 8 |
| Calcolare il valore p della migliore come se fosse l'unica; scegliere l'ipotesi nulla più comoda; scegliere sulla somma | 9 |
| Dire «p = 0,003, la regola funziona»; scegliere il rimescolamento più bello | 10 |
| Dire «è robusta, i vicini sono positivi» senza il confronto con il rumore | 11 |
| Dire «funziona in tutti i periodi» senza togliere il periodo migliore; credere che dieci mesi siano «il mercato» | 12 |
| Leggere +0,12 della prova come «confermato» o come «smentito»; ritoccare dopo la prova e riprovare sugli stessi dati | 13 |
Riferimento rapido: le regole
| Concetto | Regola del libro | Cap. |
|---|---|---|
| Backtest | Regole scritte che un computer applica; dati dichiarati; risultato in R con costo; ipotesi di esecuzione | 1, 8 |
| Famiglia di regole | Fissata prima: 5 × 4 × 4 × 3 × 2 = 480; si salvano tutti i risultati | 1, 2 |
| Prove | Contare tutte, comprese quelle nascoste; migliore di N = massimo del caso su N | 3 |
| Parametri | Contare i valori provati; sotto 20 operazioni per parametro libero la regola è fragile | 4 |
| Divisione | Nel tempo, decisa prima: 65% scelta, 35% prova; la prova si guarda una volta sola | 5 |
| Walk-forward | Si sceglie sui dati precedenti, si opera il periodo dopo; la finestra è un parametro | 6 |
| Tempo | Entrare alla chiusura del segnale o all'apertura dopo; prova del ritardo | 7 |
| Esecuzione | Stop prima nelle candele ambigue, costo non minimo, tutto ciò che manca va nel verso peggiore | 8 |
| Valore p | Sul massimo del caso, non sulla regola sola; R medio, non somma; più di un'ipotesi nulla | 9, 10 |
| Robustezza | Vicini di un passo, mappa, rapporto vicini/migliore confrontato con il rumore | 11 |
| Periodi | 4-6 periodi, togli il migliore, regimi | 12 |
| Prova | Regola di decisione scritta prima; «inconcludente» è un risultato; operazioni necessarie 7,85 σ²/μ² | 13 |
Riferimento rapido: le misure
| Cap. | Risultato |
|---|---|
| 1 | 4.865 candele H1 (15 dic 2025 - 6 ott 2026); regola di esempio 307 operazioni a −0,02 ± 0,11 R; griglia di 480 regole, 108.309 operazioni |
| 2 | Griglia −0,017 R, 189 regole positive, 32 con limite basso > 0; migliore +0,74 ± 0,43 (79 op, +58,1 R, fattore 2,37, drawdown 6,1 R) |
| 3 | Su serie casuali migliore di 1/5/20/480 regole: −0,03/+0,09/+0,16/+0,28; di 480: massimo +0,53, > +0,3 in un terzo delle serie |
| 4 | 1 parametro: +0,05 → +0,01 (casuali); 5 parametri: +0,35 → +0,02; dati veri 3-5 parametri: +0,75-0,82 → +0,43-0,46 |
| 5 | Scelta +0,82 ± 0,52 (55 op) → prova +0,43 ± 0,73 (25); primo decile +0,38 → +0,10; correlazione di rango +0,43 (casuali +0,17) |
| 6 | Walk-forward a 3 mesi +0,16 ± 0,33 (96 op); casuali +0,01; finestre 1/2/3/6 mesi: −0,13/+0,06/+0,16/+0,45 |
| 7 | Errore di tempo: −0,02 → +0,83 R (92% di vittorie); regola di giornata −0,15 → +1,61 (98%) |
| 8 | Candele ambigue: 189 → 273 regole positive; stop stretto −0,17 → +0,12; costi 0-2 $: media −0,001 → −0,110, migliore +0,75 → +0,68 |
| 9 | Migliore su casuali (blocchi di 1/4/10 giorni): +0,28/+0,43/+0,53; 65 regole con p ≤ 0,05 (attese 24), 59 breakout |
| 10 | Valori p della migliore: 0,003 (direzione), 0 (tempi), 0 (serie); mediana ed esempio 0,36-0,89 |
| 11 | Vicini +0,28/+0,66 (media +0,43); rapporto 0,58 contro 0,52; scelta per vicini: +0,12 nella prova |
| 12 | Fade negativo in 5 periodi su 5, breakout positivo in 4; correlazione di rango tra periodi +0,72/+0,29/−0,01/+0,03; il primo periodo fa il 48% |
| 13 | Scelta +0,53 ± 0,50 → prova +0,12 ± 0,73 (23 op): inconcludente; su casuali la prova è positiva nel 53% e ≥ +0,12 nel 30% |
Tutte le misure vengono da dieci mesi di un solo strumento (dicembre 2025 - ottobre 2026, future perpetuo dell'oro su Binance, solo prezzi), da una griglia di 480 regole di breakout e da serie casuali costruite rimescolando le stesse candele. Nessuna dimostra un vantaggio operativo.
Glossario
I termini del libro sono nel glossario del sito, dove ognuno ha un esempio con i numeri.
| Termine | Definizione |
|---|---|
| Griglia di regole | L'insieme di tutte le combinazioni dei valori scelti per i parametri di una regola, provate una per una sugli stessi dati. |
| Test multipli e selezione | Il fatto che, provando molte regole sugli stessi dati e tenendo la migliore, il risultato della migliore sopravvaluta quello che aspetta la regola su dati nuovi. |
| Gradi di libertà del ricercatore | Tutte le scelte fatte guardando i risultati: valori dei parametri provati e scartati, timeframe, strumento, periodo, filtri, versioni della regola. |
| Operazioni per parametro | Il numero di operazioni di una regola diviso il numero di parametri che i dati hanno scelto: una misura di quanto il risultato può essere adattamento. |
| Regressione verso la media | Il fatto che le regole scelte perché hanno il risultato più alto su un campione, su dati nuovi tendono a un risultato più vicino alla media. |
| Parte di prova a uso unico | La parte dei dati tenuta da parte per provare la regola una sola volta, senza usarla per scegliere né per correggere. |
| Guardare nel futuro (look-ahead) | Un errore di tempo in cui un backtest usa, in un punto, un'informazione che in quel momento non esisteva ancora. |
| Candela ambigua | Una candela che tocca insieme lo stop e l'obiettivo di un'operazione: con le sole candele non si sa quale sia venuto prima. |
| Valore p dopo la scelta | La probabilità che, tra N regole senza vantaggio, la migliore faccia uguale o meglio del risultato osservato: si calcola sul massimo del caso, non su una regola sola. |
| Serie casuale di confronto | Una serie costruita rimescolando le candele vere (in blocchi) e togliendo la tendenza, con la stessa volatilità e senza il legame che si vuole misurare. |
| Ipotesi nulla del test | Che cosa si rompe con il rimescolamento: direzione, tempi di ingresso o struttura della serie. Decide a quale domanda risponde il valore p. |
| Media dei vicini | La media dei risultati delle regole che differiscono da quella scelta per un solo parametro e di un solo passo: una misura di robustezza. |
| Regime di mercato | Un tratto di mercato in cui i prezzi si comportano in un modo (tendenza, intervallo, volatilità alta o bassa): una regola può funzionare in un regime e non in un altro. |
| Protocollo di prova | L'insieme di regole scritte prima di guardare i risultati: famiglia di regole, divisione dei dati, ipotesi di esecuzione, criterio di scelta, confronto con il caso, regola di decisione e prova unica. |
Che cosa fare adesso
- Scrivi il processo prima di guardare i risultati (capitolo 13): famiglia di regole, divisione, ipotesi prudenti, criterio di scelta, regola di decisione per la prova.
- Tieni il registro delle prove e riporta sempre «migliore di N».
- Confronta ogni risultato con il caso (serie rimescolate, più di una ipotesi nulla) e con il fuori campione.
- Prova prima il tempo: nessun dato usato prima che esista; prova del ritardo.
- Se il verdetto è inconcludente, procedi con rischio piccolo (libro 11) e una prova in avanti decisa prima.
- Per le basi: il libro «Struttura di mercato», il libro «Order block dalla A alla Z», il libro «FVG e liquidità», il libro «SMC: il sistema intero», il libro «Indicatori dalla A alla Z», il libro «Elliott e Fibonacci», il libro «Schemi grafici», il libro «Candele giapponesi», il libro «Orari, sessioni e news», il libro «Supporto, resistenza e livelli» e il libro «Rischio e dimensionamento». Per rischio e disciplina: il corso di rischio e psicologia.
Test finale
Quindici domande sul libro. Superi il test con almeno 12 risposte giuste.
Test finale del libro
1. Nel grafico le linee sono ingresso (5.405,79 $), stop (5.374,51 $) e obiettivo (5.452,71 $) di un'operazione rialzista del 2 marzo 2026 (ore UTC); la linea in alto a sinistra è il massimo delle 30 candele (5.388,00 $). Quale lettera è la candela in cui lo stop è colpito?
Leggere il grafico a parole
| Quando | Cosa | Prezzo |
|---|---|---|
| 2 mar 2026 07:00 UTC | ingresso | 5.405,79 |
| 2 mar 2026 07:00 UTC | stop: −1 R (31,3 $) | 5.374,51 |
| 2 mar 2026 07:00 UTC | obiettivo: +1.5 R | 5.452,71 |
| 1 mar 2026 23:00 UTC | massimo delle 30 candele | 5.388,00 |
| 2 mar 2026 03:00 UTC | Punto A | 5.367,99 |
| 2 mar 2026 07:00 UTC | Punto B | 5.420,00 |
| 2 mar 2026 10:00 UTC | Punto C | 5.399,46 |
| 2 mar 2026 11:00 UTC | Punto D | 5.397,81 |
Orari in UTC.
2. Nel grafico le linee sono ingresso (4.638,15 $), stop (4.609,62 $) e obiettivo (4.680,95 $) di un'operazione rialzista del 31 marzo 2026 (ore UTC), con il massimo delle 30 candele a 4.631,98 $. Quale lettera è la candela del segnale e dell'ingresso?
Leggere il grafico a parole
| Quando | Cosa | Prezzo |
|---|---|---|
| 31 mar 2026 16:00 UTC | ingresso | 4.638,15 |
| 31 mar 2026 16:00 UTC | stop: −1 R (28,5 $) | 4.609,62 |
| 31 mar 2026 16:00 UTC | obiettivo: +1.5 R | 4.680,95 |
| 31 mar 2026 08:00 UTC | massimo delle 30 candele | 4.631,98 |
| 31 mar 2026 12:00 UTC | Punto A | 4.597,99 |
| 31 mar 2026 16:00 UTC | Punto B | 4.651,33 |
| 31 mar 2026 18:00 UTC | Punto C | 4.670,00 |
| 31 mar 2026 19:00 UTC | Punto D | 4.683,60 |
Orari in UTC.
3. Su serie casuali senza vantaggio, quanto vale in media la migliore di 480 regole provate?
4. Con 5 parametri liberi, su serie casuali la migliore della prima parte vale +0,35 R. Quanto vale, circa, nella seconda?
5. Il primo decile delle regole fa +0,38 R nella prima parte e +0,10 R nella seconda. Come si chiama il fenomeno?
6. Perché ogni operazione di un walk-forward è fuori campione?
7. Ritardi ogni ingresso di una candela e il R medio passa da +0,83 a −0,02. Che cosa significa?
8. Una regola a stop stretto fa −0,17 R con la regola prudente per le candele ambigue e +0,12 con quella ottimistica. Che cosa fai?
9. La migliore di 480 vale +0,74 R. Con che cosa va confrontata, per il valore p?
10. Con blocchi rimescolati di 10 giorni la migliore di 480 vale in media +0,53 R sulle serie casuali, contro +0,28 con blocchi di un giorno. Che cosa significa?
11. Il rapporto vicini/migliore è 0,58 per la regola vera e 0,52 per la migliore delle serie casuali. Che cosa dice?
12. La migliore regola ha il 48% del guadagno nel primo di cinque periodi, quando l'oro sale del 18%. Che cosa fai?
13. La prova unica fa +0,12 ± 0,73 R su 23 operazioni. Con la regola di decisione scritta prima (limite basso sopra zero = superata), qual è il verdetto?
14. La correlazione di rango tra i risultati delle regole a costo 0 e a costo 1 $ è 0,976. Che cosa dice?
15. Provi 12 indicatori su 3 timeframe con 4 stop ciascuno. Quante prove hai fatto?
Hai una domanda o vuoi condividere il tuo esercizio?
Scrivi nella community, oppure entra nella sala segnali gratuita su Telegram.
Contenuto educativo, non è consulenza finanziaria. Il trading comporta rischi.