Antes de pagar una evaluación con una estrategia, hazle estas 12 preguntas. Tres son imprescindibles: costes reales, suficientes operaciones y una prueba hacia delante. Si falla alguna de esas tres, ningún resultado del pasado vale lo que parece.
La idea de fondo: el pasado se gasta
Cada vez que miras unos datos y cambias algo, esos datos dejan de servir para juzgar el resultado. Por eso el método consiste en reservar datos que no se han mirado y en medir siempre contra lo que daría el azar. Es lo que hicimos con miles de estrategias en nuestro laboratorio; estas preguntas son el resumen.
Las 12 preguntas
Marca tus respuestas. No se guardan ni se envían a ningún sitio.
- 1¿Escribiste las reglas y el criterio de éxito antes de mirar los datos?
Si decides después de mirar, cualquier resultado te parecerá una confirmación.
Si no: Escríbelas ahora y pruébalas en datos que no hayas visto.
- 2¿Separaste los datos en ajuste, validación y examen, y los miraste en ese orden?
Pasar tres tramos no basta por sí solo: de 4.000 estrategias al azar, el 9,8 % los pasó.
Si no: Lo que tienes es un diseño, no una prueba.
- 3¿Tienes un examen en años distintos que solo se usa una vez?
Los mercados cambian de régimen. Un examen en otros años, mirado una sola vez por configuración, es lo más parecido al futuro.
Si no: Alarga la prueba hacia delante antes de arriesgar nada.
- 4¿Incluye comisión y deslizamiento, al entrar y al salir? clave
En el micro Nasdaq son unos 4,4 ticks por operación: con objetivos pequeños se llevan más de la mitad.
Si no: Réstale los costes: muchas estrategias dejan de ganar aquí.
- 5¿La probaste también sin costes, para diagnosticar?
Si sin costes tampoco gana, no hay nada que optimizar; si gana mucho sin costes y nada con ellos, opera demasiado.
Si no: Hazlo antes de tocar un solo parámetro.
- 6¿Las velas son al menos tan finas como tu operativa?
Si el objetivo y el stop caben en una vela, el backtest no sabe cuál se tocó primero.
Si no: Repite con velas más finas o con ticks.
- 7¿Hay cientos de operaciones y un t de 2 o más, calculado por días? clave
Con una ventaja de 25 $ y una desviación de 249 $ por operación hacen falta unas 380 operaciones para distinguirla del azar.
Si no: Ventaja no demostrada: el % de aprobar que te dé cualquier simulador será optimista.
- 8¿Gana claramente a un grupo de control que no sabe nada?
En el micro Nasdaq de 2023-2024, comprar a ciegas dejaba +4.164 $. Una estrategia de solo compras tiene que ganar a eso.
Si no: Su ventaja es otra cosa: la subida del mercado, la hora del día…
- 9¿Las configuraciones vecinas también ganan, y en las dos mitades de los datos?
La correlación entre el resultado en el ajuste y en el examen fue de -0,47: lo que mejor salía en el pasado tendía a salir peor. Una estrategia sólida ganaba en el 100 % y el 96 % de sus variantes en cada mitad; otra, en el 24 % y el 73 %.
Si no: Es un pico: no lo operes. Elige el centro de una meseta.
- 10¿Dimensionas con un Monte Carlo por días y al precio de hoy?
La peor caída de tu backtest es solo una de las posibles. Y las reglas de fondeo están en dólares fijos mientras el Nasdaq se ha multiplicado: un backtest de 2019 con 1 contrato subestima el riesgo de hoy.
Si no: Tu riesgo real es mayor del que crees: reduce el tamaño.
- 11¿Tu plataforma hace exactamente las mismas operaciones que tu simulación?
Cuando lo comprobamos, coinciden en el 99-100 % de las operaciones. Si el backtest de la plataforma sale mucho mejor que tu simulación, lo más probable es que esté roto.
Si no: Arregla la ejecución antes de seguir.
- 12¿La has probado hacia delante, en tiempo real, con dinero simulado? clave
Es el único dato que nadie ha podido mirar antes, ni siquiera tú.
Si no: Todavía no es para dinero real ni para pagar una evaluación.
Por qué tanto rigor
Porque casi todo lo que parece una ventaja es otra cosa: el azar de haber probado muchas variantes, una subida del mercado, un error de backtest o un régimen que ya pasó. En nuestro laboratorio, la mayoría de las estrategias que brillaban en los datos con que se diseñaron no aguantaron estas preguntas. Las pocas que sí, ganaban en todos los tramos, en años distintos y frente al azar.
De dónde salen las cifras
De las pruebas del laboratorio descritas en el libro (capítulos 3, 5, 9, 11 y 13): estrategias generadas al azar pasadas por los mismos filtros, compra a ciegas en el micro Nasdaq de 2023-2024, coherencia de variantes por mitades de los datos y comparación de backtests con la plataforma. Resultados simulados e hipotéticos.
Resultados simulados e hipotéticos, con las limitaciones que eso implica. No es asesoramiento de inversión. Las reglas de las firmas cambian: compruébalas en su web. Este artículo no contiene enlaces de afiliado.