Esperanza, ventaja y tamaño de muestra: cuándo significan algo los resultados
- Cómo medir bien una ventaja
- Por qué las muestras pequeñas engañan, con números
- Cómo distinguir habilidad de suerte en un historial
Ventaja = esperanza positiva después de costes
La lección "Riesgo–beneficio y porcentaje de aciertos" presentó la esperanza: % de aciertos × ganancia media − % de fallos × pérdida media. Una ventaja es una estrategia cuya esperanza sigue siendo positiva después de costes a lo largo de muchas operaciones.
Las muestras pequeñas mienten
Toma una estrategia con un 50 % real de aciertos. En cualquier serie de 20 operaciones, conseguir 14 o más ganadoras por puro azar ocurre alrededor del 6 % de las veces, y 6 o menos, más o menos igual. Así que un "70 % de aciertos" en 20 operaciones demuestra muy poco.
| Operaciones | Dispersión típica del % de aciertos en torno a un 50 % real |
|---|---|
| 20 | unos ±22 puntos porcentuales |
| 100 | unos ±10 |
| 400 | unos ±5 |
(Rangos aproximados del 95 %: ±2 × √(0,25 ÷ operaciones).)
¿Habilidad o suerte?
- Más operaciones, en distintas condiciones de mercado.
- Consistencia a lo largo de los meses, no un mes estupendo.
- Resultados acordes con la lógica de la estrategia (una estrategia de tendencia debería ir bien en tendencias).
- Resultados parecidos fuera de muestra: en datos o periodos no usados para diseñarla.
Pruébalo
Esperanza por día, no por operación
Una estrategia de +0,2R con 2 operaciones a la semana gana unos 0,4R semanales. Una de +0,1R con 10 a la semana gana 1R, si la ejecución y los costes aguantan. La frecuencia importa, pero solo mientras la ventaja sobreviva a los costes.
- Llamar ventaja a 20 buenas operaciones.
- Ignorar los costes al calcular la esperanza.
- Juzgar una estrategia en un solo régimen de mercado.
Ponte a prueba
- Ventaja significa esperanza positiva después de costes, en muchas operaciones.
- Las muestras pequeñas oscilan muchísimo: 20 operaciones demuestran poco.
- Busca consistencia en el tiempo y en distintas condiciones.