La brecha entre el backtest y el trading en vivo
Encontraste una ventaja (edge). Pasó la validación walk-forward. Pasó los controles de robustez. El fundamento económico tiene sentido.
¿Y ahora qué?
El peor error es saltar directamente a operar en vivo con el tamaño completo. Los backtests, por rigurosos que sean, son simulaciones. Los mercados en vivo tienen fricciones, latencias y sorpresas que los backtests no capturan.
Esta lección explica nuestro proceso de ascenso, el camino sistemático que lleva las ventajas del descubrimiento al trading demo y, de ahí, a la producción en vivo.
El proceso de ascenso
Nuestro proceso tiene cuatro etapas:
Etapa 1: descubrimiento La ventaja supera la validación estadística. Existe en nuestra base de datos como "candidata".
Etapa 2: trading demo La ventaja corre en los sistemas de producción, pero no ejecuta operaciones reales. Las señales se activan y se registra el P&L hipotético, pero no hay capital en riesgo.
Etapa 3: en vivo reducido La ventaja pasa a operar con tamaños de posición mínimos. Dinero real en riesgo, pero con una exposición limitada. Fase de aprendizaje.
Etapa 4: en vivo completo La ventaja pasa a operar con los tamaños de posición previstos. En plena producción.
Cada etapa tiene criterios de entrada y de salida. Las ventajas pueden ascender a la etapa siguiente o descender a la anterior.
Etapa 1: criterios de salida del descubrimiento
Para salir del descubrimiento y entrar en trading demo, una ventaja tiene que cumplir:
- Validación walk-forward: rendimiento aceptable tanto dentro de la muestra como fuera de muestra
- Tamaño de muestra: mínimo 500 eventos (preferiblemente 1,000 o más)
- Tasa de acierto: por encima del umbral para su tipo (por ejemplo, >60% en reversión a la media)
- Factor de beneficio: superior a 1.5
- Estabilidad de parámetros: el rendimiento se degrada de forma gradual al cambiar los parámetros
- Fundamento económico: un mecanismo explicable
- Documentación del régimen: deja claro qué condiciones de mercado requiere
- Sin redundancia: no duplica ventajas que ya operan en vivo
Las ventajas que pasan reciben un ID único y entran en la cola de trading demo.
Etapa 2: trading demo
El trading demo es infraestructura de producción sin ejecución real.
Qué pasa:
- La ventaja se carga en el escáner de señales
- Las señales se activan según las reglas de la ventaja
- Se registran entradas y salidas hipotéticas
- El P&L se calcula como si las operaciones se hubieran ejecutado
- Se registran la latencia y los tiempos
Por qué importa:
- Valida que el código de producción coincida con la lógica del backtest
- Detecta problemas en el flujo de datos (datos desactualizados, fuentes que faltan)
- Revela problemas operativos (sincronización de las señales, ventanas de ejecución)
- Aporta datos de rendimiento prospectivos
Duración: Mínimo 30 días o 50 señales, lo que tarde más. Algunas ventajas dan señales con frecuencia y llegan a 50 señales en dos semanas. Otras son poco frecuentes y necesitan meses.
Criterios de salida para ascender:
- Rendimiento prospectivo a menos de un 20% de lo esperado según el backtest
- Sin problemas operativos
- Se mantiene la calidad de las señales
- Al menos 30 señales observadas
Criterios de salida para descender:
- Rendimiento prospectivo significativamente peor que el del backtest
- Problemas operativos que no se pueden resolver
- Cambios en las condiciones del mercado que invalidan la ventaja
El trading demo es barato: no hay dinero en riesgo. Quédate aquí hasta tener confianza.
Etapa 3: en vivo reducido
El primer dinero real. Tamaños de posición del 10-25% del tamaño final previsto.
Objetivo:
- Validar la calidad de ejecución (deslizamiento, tasas de ejecución)
- Vivir la psicología del P&L real
- Detectar problemas que solo aparecen con órdenes reales
Qué registramos:
- Precios de entrada reales vs. esperados
- Precios de salida reales vs. esperados
- Costo de deslizamiento por operación
- Tasa de ejecución (qué % de las señales se ejecuta realmente)
- P&L real vs. P&L demo
Duración: Mínimo 30 días o 30 operaciones reales.
Lógica del tamaño de posición: Si el tamaño final previsto es el 2% del portafolio por señal, la etapa en vivo reducido usa un 0.3-0.5% por señal. Suficiente para que sea real, y lo bastante pequeño para sobrevivir si la ventaja falla.
Criterios de salida para ascender:
- El rendimiento real sigue al rendimiento demo (con una diferencia de hasta el 25%)
- Deslizamiento aceptable (normalmente <0.2%)
- Calidad de ejecución estable
- Sin sorpresas negativas
Criterios de salida para descender:
- Rendimiento significativamente inferior al de demo
- Problemas de ejecución (malas ejecuciones, deslizamiento alto)
- La ventaja muestra deterioro
Etapa 4: en vivo completo
La ventaja funciona con los tamaños de posición previstos y con plena confianza.
Monitoreo continuo:
- Rendimiento móvil vs. expectativas históricas
- Alineación con el régimen (¿la ventaja está en su régimen válido?)
- Frecuencia de señales vs. la esperada
- Seguimiento del drawdown
Señales de alarma:
- Rendimiento que se deteriora con el tiempo (deterioro de la ventaja)
- Frecuencia de señales en caída (cambian las condiciones del mercado)
- Correlación inesperada con otras ventajas (riesgo de concentración)
Incluso las ventajas en la etapa en vivo completo pasan por revisiones periódicas. Ninguna ventaja funciona para siempre sin supervisión.
Criterios de corte: cuándo dejar de operar una ventaja
Las ventajas mueren. Los mercados cambian. Lo que funcionaba deja de funcionar.
Criterios de corte (cualquiera de ellos activa una revisión de stop loss):
Por rendimiento:
- La tasa de acierto móvil de 30 días cae por debajo del 50%
- El drawdown supera el 20% del drawdown máximo histórico de la ventaja
- Tres meses consecutivos de rendimiento negativo
Estadísticos:
- Rendimiento reciente estadísticamente peor que el del backtest (>2 desviaciones estándar por debajo de lo esperado)
- El intervalo de confianza de la tasa de acierto ya no contiene la tasa de acierto del backtest
Operativos:
- Los requisitos de régimen dejan de cumplirse durante un periodo prolongado
- La fuente de datos deja de estar disponible o deja de ser confiable
- Cambios en el exchange invalidan los supuestos de ejecución
Cualitativos:
- Un cambio en la estructura del mercado que invalida la tesis de la ventaja
- Cambios regulatorios que afectan el mecanismo de la ventaja
- La actividad de la competencia sugiere que la ventaja ahora está saturada
Cuando se activa un criterio de corte, la ventaja pasa al estado "suspendida". Puede reevaluarse más adelante, pero deja de operar de inmediato.
Tamaño de posición durante las transiciones
Dimensionar bien la posición permite gestionar el riesgo de cada ascenso:
Descubrimiento → Demo: sin posición (solo demo)
Demo → En vivo reducido: 15-25% del tamaño objetivo
En vivo reducido → En vivo completo: aumento gradual
- Semanas 1-2: 25% del objetivo
- Semanas 3-4: 50% del objetivo
- Semanas 5-6: 75% del objetivo
- Semana 7 en adelante: 100% del objetivo
Este enfoque gradual limita el daño si algo sale mal durante la transición.
La base de datos de ascensos
Se registra el recorrido de cada ventaja:
| Campo | Descripción |
|---|---|
| id_ventaja | Identificador único |
| etapa_actual | DESCUBRIMIENTO/DEMO/EN_VIVO_REDUCIDO/EN_VIVO_COMPLETO/SUSPENDIDA |
| fecha_entrada_etapa | Cuándo empezó la etapa actual |
| fecha_inicio_demo | Cuándo empezó el trading demo |
| señales_demo | Número de señales en demo |
| pnl_demo | P&L demo acumulado |
| fecha_inicio_en_vivo | Cuándo empezó el trading en vivo con dinero real |
| señales_en_vivo | Número de señales reales |
| pnl_en_vivo | P&L real acumulado |
| notas | Observaciones, problemas, decisiones |
Este historial permite hacer análisis: ¿cuánto tiempo suelen sobrevivir las ventajas? ¿Qué predice que una ventaja falle? ¿Qué métodos de descubrimiento producen ventajas duraderas?
Ejemplo: cronología del ascenso de una ventaja
Un ejemplo real (anonimizado):
Día 0: se descubrió la ventaja. Divergencia entre financiamiento y OI en régimen alcista. Tasa de acierto del 68% en el backtest, 1,247 muestras.
Día 1: pasó la revisión de validación. Entró en la cola de trading demo.
Día 14: empezó el trading demo, una vez despejada la cola.
Día 45: terminó el trading demo. 37 señales, tasa de acierto del 65%, -3% frente al backtest. Una variación aceptable.
Día 46: ascendió a la etapa en vivo reducido, con el 20% del tamaño.
Día 78: terminó la etapa en vivo reducido. 24 operaciones reales, tasa de acierto del 63%, deslizamiento del 0.08%. P&L real equivalente al 94% de lo esperado en demo.
Día 79: comenzó el ascenso gradual al tamaño completo.
Día 107: en vivo completo, al 100% del tamaño.
Día 240: sigue en marcha. Ventana móvil de 90 días: tasa de acierto del 61%; rinde un poco por debajo de lo esperado, pero dentro de los límites.
Día 312: la tasa de acierto cayó al 54% en una ventana de 60 días. Se levantó una bandera amarilla.
Día 350: la tasa de acierto siguió cayendo. Se suspendió para revisión.
Día 380: análisis post mortem: el régimen del mercado cambió y la ventaja ya no es válida en las nuevas condiciones. Retirada de forma permanente.
Vida útil total: unos 11 meses. Es lo habitual: las ventajas no duran para siempre.
Mejora continua sin sobreajuste
Las ventajas se pueden mejorar, pero con cuidado:
Permitido:
- Endurecer los filtros de régimen según lo observado en vivo
- Ajustar el momento de salida según los datos de ejecución
- Afinar el tamaño de posición según la volatilidad realizada
Peligroso:
- Cambiar los parámetros de umbral para mejorar el rendimiento reciente
- Agregar factores nuevos para filtrar las malas señales recientes
- Cambiar la lógica para justificar las pérdidas
La diferencia: cambios basados en ideas generalizables vs. cambios que sobreajustan los datos recientes.
Ante la duda, no modifiques nada. Pon en marcha una nueva versión de la ventaja y pruébala desde cero en el proceso, en vez de parchear una ventaja que ya está en vivo.
Puntos clave
- Nunca pases directamente del backtest a operar en vivo con el tamaño completo
- Proceso: Descubrimiento → Demo → En vivo reducido → En vivo completo
- Cada etapa tiene criterios de entrada y de salida, con duraciones mínimas
- El tamaño de posición aumenta de forma gradual durante las transiciones
- Los criterios de corte definen cuándo dejar de operar una ventaja
- Registra el recorrido de cada ventaja para aprender y analizar
- Las ventajas tienen una vida útil finita: hace falta un monitoreo continuo
- Mejora con cuidado para no volver a sobreajustar al ruido reciente
El proceso de ascenso es tu gestión del riesgo para las estrategias nuevas. Cuesta tiempo y oportunidades, pero evita desastres. Un proceso disciplinado es lo que separa un trabajo profesional de apostar con resultados de backtest.