Tu backtest probablemente miente: azar de control, variantes declaradas y costes reales

---

Estructura H2

H2 — Un backtest mide; no promete

Evidencia. En el laboratorio de FX Capital se evaluaron cuatro líneas con veredicto explícito [FXC-3 §1.5]:

• BTMM / A4: no pasa · 0,66–1,10 · acierto 22–29 % a 1:3 (azar = 25 %)
• A2 FX: no pasa · 0,86–0,99 · cifras antiguas falsas; backtest rehecho
• N-01 (tendencia D1): no pasa · 0,86 · 23 años, 9 mercados
• N-02 (cripto D1): candidato pendiente de reproducción independiente · 1,41 (no validado) · margen corto, 2.ª mitad floja; el PF no se presenta como resultado validado

Tres de cuatro no pasan. Decirlo es el punto: publicamos los que fallan. Un backtest honesto no es el que valida una idea, es el que puede tumbarla.

Hipótesis. El valor de un backtest es su capacidad de rechazar, no de confirmar [FXC-3 §2.2] (interpretación).

Riesgo de redacción. Convertir "el backtest miente" en un argumento para vender señales. Es lo contrario: FX Capital vende veredictos de backtest, no señales ni gestión delegada de operaciones [doc90, regla 6].

H2 — Fuga 1: no hay azar de control

Evidencia. En BTMM/A4, el acierto fue de 22–29 % a un R:R de 1:3, y el azar a 1:3 es 25 %. El acierto del sistema cae dentro de la banda del azar [FXC-3 §1.1].

Sin azar de control, un 25 % de acierto parece un dato; con azar de control, se ve que es exactamente lo que daría una moneda al aire a ese R:R. El azar de control es el listón: sin él, no sabes si tu resultado significa algo.

Hipótesis. Muchos sistemas "rentables" en backtest no superan su propio azar de control a ese R:R; el acierto se confunde con habilidad [FXC-3 §1.1] (interpretación).

Riesgo de redacción. Presentar BTMM/A4 como "a punto de pasar" por el tramo alto del PF (1,10). Es cherry-picking de ronda; el intervalo completo es el mensaje [FXC-3 §1.1].

H2 — Fuga 2: no hay variantes declaradas

Evidencia. Sin la lista de variantes probadas antes de elegir la "buena", el resultado es la mejor de N apuestas, y la mejor de N apuestas siempre parece buena. La herramienta citada contra este sesgo es la Deflated Sharpe Ratio (Bailey y López de Prado, 2014) [FXC-3 §2.2].

Un backtest sin variantes declaradas oculta cuántos intentos se hicieron. Declarar las variantes es lo que permite descontar el efecto de haber probado muchas.

PENDIENTE DE ABOGADO — el dictamen legal (CMVM / MiFID II / MAR) aplica a informes y tarjetas; este borrador nombra el método, no publica resultados de sistema.

Hipótesis. Un backtest sin variantes declaradas es marketing, no medición [FXC-3 §2.2].

Riesgo de redacción. Cifrar la Deflated Sharpe o inventar un número de variantes. En este borrador el método se nombra, no se fabrica ninguna cifra [FXC-4 §4.1].

H2 — Fuga 3: no hay costes reales

Evidencia. En los sistemas intradía medidos, el coste de ejecución se movió en la banda de 0,6–1,5 pips, suficiente para comerse la ventaja [FXC-3 §2.1]. El caso documentado es A2 FX: el backtest rehecho reveló Profit Factor bruto y neto reportados en unidades distintas, breakeven sesgado y operaciones solapadas; el veredicto corregido fue no pasa (PF neto 0,86–0,99) [FXC-3 §1.2].

Un backtest sin coste real —o con un coste fijo supuesto— mide un mundo que no existe.

Hipótesis. El fallo de medición, no la idea, explica la mayoría de backtests que no sobreviven a la corrección [FXC-3 §1.2] (interpretación).

Riesgo de redacción. Citar las cifras antiguas de A2 (ya retiradas) reintroduce un dato falso. Siempre la cifra rehecha.

H2 — Cómo lo medimos: el veredicto de backtest

Evidencia. El producto 3 (Veredicto de backtest) emite uno de tres veredictos: pasa / no pasa / no medible [doc90]. Evalúa: acierto contra el azar a ese R:R, costes reales, mitades (estabilidad entre primera y segunda mitad de la muestra), sobreajuste (Deflated Sharpe), concentración y fugas.

El veredicto "no medible" es tan importante como los otros dos: cuando faltan datos, la respuesta honesta es no medir, no inventar.

Hipótesis. Un veredicto con tres estados (incluido "no medible") evita la presión de forzar un resultado binario [doc90] (interpretación).

Riesgo de redacción. Presentar "pasa" como rentabilidad. "Pasa" significa que superó los filtros de medición, no que gane en el futuro.

H2 — N-02: el cuarto, candidato pendiente de reproducción independiente

Evidencia. N-02 (cripto D1) es un candidato pendiente de reproducción independiente: su PF neto fue 1,41, pero con margen corto y segunda mitad de la muestra floja. La reproducción independiente está pendiente [FXC-3 §1.4]. El PF se cita como dato del filtro, no como resultado validado.

Hipótesis. Puede haber edge genuino, o puede ser sensibilidad al periodo; aún no se sabe [FXC-3 §1.4].

Riesgo (regla dura). N-02 nunca se presenta como rentable. Se comunica solo como "candidato pendiente de reproducción independiente". Si la reproducción falla, cae al grupo de los que no pasan [FXC-3 §1.4].

Dato faltante. Número de rondas exactas de reproducción independiente y su calendario: Dato faltante [FXC-3 §4].

---

Bloque de Evidencia / Hipótesis / Riesgo (resumen del ticket)

• Evidencia: veredictos BTMM/A4 (no pasa; acierto 22–29 % vs. azar 25 %), A2 (no pasa; PF neto 0,86–0,99; cifras antiguas falsas), N-01 (no pasa; PF neto 0,86), N-02 (candidato pendiente de reproducción independiente; PF 1,41 no validado); Deflated Sharpe (Bailey y López de Prado, 2014); coste 0,6–1,5 pips; veredictos pasa/no pasa/no medible.
• Hipótesis: un backtest puede rechazar; sin azar de control, variantes declaradas y coste real no mide; "no medible" es una respuesta válida.
• Riesgo: vender señales con "el backtest miente"; cherry-picking de rondas; citar cifras antiguas de A2; cifrar la Deflated Sharpe; presentar N-02 como rentable.

Dato faltante

• Rondas y calendario de reproducción independiente de N-02.
• Precios de los productos (no se menciona precio en el artículo).

Bloque fijo de no-asesoramiento (literal)

Esto es análisis de ejecución y medición, no una recomendación de inversión ni una señal. Resultados en R y pips, con chip DEMO/REAL. Los resultados pasados no garantizan resultados futuros.

Etiquetas de cumplimiento

• PENDIENTE DE ABOGADO (CMVM / MiFID II / MAR): el artículo cita veredictos de sistema y menciona informes; queda marcado como borrador sujeto a dictamen antes de publicar [doc90, regla 10].
• Sin importes en euros ni saldo. Sin "señal/compra/vende". Español nativo. Sin IB/afiliación/referidos.

Checklist del ticket

Nota de riesgo: este artículo es educativo. La operativa en mercados financieros implica riesgo de pérdida y ningún método elimina esa posibilidad. El contenido no constituye asesoramiento personalizado, ni una recomendación de inversión, ni una promesa de rentabilidad.