A distância entre o backtest e o trading ao vivo
Você encontrou um edge (vantagem estatística). A validação walk-forward passou. Os testes de robustez passaram. A justificativa econômica faz sentido.
E agora?
O pior erro é pular direto para o trading ao vivo com o tamanho total. Backtests, por mais rigorosos que sejam, são simulações. Os mercados ao vivo têm atritos, latências e surpresas que os backtests não capturam.
Esta aula cobre nosso pipeline de promoção—o processo sistemático que leva os edges da descoberta, passando pelo trading demo (paper trading), até a produção ao vivo.
O pipeline de promoção
Nosso pipeline tem quatro etapas:
Etapa 1: descoberta O edge passa na validação estatística. Ele existe no nosso banco de dados como "candidato".
Etapa 2: trading demo O edge roda nos sistemas de produção, mas não executa nenhuma operação real. Os sinais disparam e o PnL hipotético é registrado, mas nenhum capital fica em risco.
Etapa 3: ao vivo reduzido O edge opera com tamanhos de posição mínimos. Dinheiro real em risco, mas com exposição limitada. Fase de aprendizado.
Etapa 4: ao vivo pleno O edge opera com os tamanhos de posição planejados. Status de produção plena.
Cada etapa tem critérios de entrada e critérios de saída. Os edges podem ser promovidos para a etapa seguinte ou rebaixados para a anterior.
Etapa 1: critérios de saída da descoberta
Para sair da descoberta e entrar no trading demo, um edge precisa passar em:
- Validação walk-forward: desempenho dentro da amostra e fora da amostra, ambos aceitáveis
- Tamanho da amostra: mínimo de 500 eventos (de preferência 1,000+)
- Taxa de acerto: acima do limiar definido para o tipo de edge (por exemplo, >60% para reversão à média)
- Fator de lucro (profit factor): acima de 1.5
- Estabilidade dos parâmetros: o desempenho piora de forma gradual quando os parâmetros mudam
- Justificativa econômica: mecanismo explicável
- Documentação do regime: deixa claro quais condições de mercado o edge exige
- Sem redundância: não duplica edges que já estão ao vivo
Os edges aprovados recebem IDs únicos e entram na fila do trading demo.
Etapa 2: trading demo
O trading demo é a infraestrutura de produção sem execução real.
O que acontece:
- O edge é carregado no scanner de sinais
- Os sinais disparam conforme as regras do edge
- Entradas e saídas hipotéticas são registradas
- O PnL é calculado como se as operações tivessem sido executadas
- Latência e timing são acompanhados
Por que isso importa:
- Valida que o código de produção bate com a lógica do backtest
- Pega problemas no pipeline de dados (dados desatualizados, feeds faltando)
- Revela problemas operacionais (timing dos sinais, janelas de execução)
- Fornece dados de desempenho de forward test (teste em tempo real)
Duração: Mínimo de 30 dias ou 50 sinais, o que levar mais tempo. Alguns edges dão sinal com frequência e chegam a 50 sinais em duas semanas. Outros são raros e precisam de meses.
Critérios de saída para promover:
- Desempenho no forward test com desvio de até 20% em relação às expectativas do backtest
- Nenhum problema operacional
- Qualidade dos sinais mantida
- Pelo menos 30 sinais observados
Critérios de saída para rebaixar:
- Desempenho no forward test bem pior que o do backtest
- Problemas operacionais que não têm solução
- Mudanças nas condições de mercado que invalidam o edge
O trading demo é barato—não há dinheiro em risco. Fique aqui até ter confiança.
Etapa 3: ao vivo reduzido
Primeiro dinheiro real. Tamanhos de posição de 10-25% do tamanho final planejado.
Objetivo:
- Validar a qualidade de execução (slippage, taxa de execução)
- Viver a psicologia do PnL real
- Pegar problemas que só aparecem com ordens reais
O que acompanhamos:
- Preços de entrada efetivos vs esperados
- Preços de saída efetivos vs esperados
- Custo de slippage por operação
- Taxa de execução (que % dos sinais é de fato executada)
- PnL real vs PnL demo
Duração: Mínimo de 30 dias ou 30 operações reais.
Lógica do position sizing (definir o tamanho da posição): Se o tamanho final planejado é 2% da carteira por sinal, o ao vivo reduzido usa 0.3-0.5% por sinal. O bastante para ser real, pequeno o bastante para você sobreviver se o edge falhar.
Critérios de saída para promover:
- O desempenho real acompanha o desempenho na demo (diferença de até 25%)
- Slippage aceitável (<0.2%, em geral)
- Qualidade de execução estável
- Nenhuma surpresa negativa
Critérios de saída para rebaixar:
- Desempenho bem abaixo do da demo
- Problemas de execução (execuções ruins, slippage alto)
- O edge mostra desgaste
Etapa 4: ao vivo pleno
O edge roda com os tamanhos de posição planejados, com total confiança.
Monitoramento contínuo:
- Desempenho em janela móvel vs expectativas históricas
- Alinhamento de regime (o edge está no regime em que é válido?)
- Frequência de sinais vs o esperado
- Acompanhamento do drawdown
Sinais de alerta:
- Desempenho piorando com o tempo (desgaste do edge)
- Frequência de sinais caindo (condições de mercado mudando)
- Correlação inesperada com outros edges (risco de concentração)
Até os edges na etapa ao vivo pleno passam por revisões regulares. Nenhum edge roda para sempre sem escrutínio.
Critérios de desligamento: quando parar de operar um edge
Edges morrem. Os mercados mudam. O que funcionava para de funcionar.
Critérios de desligamento (qualquer um deles aciona uma revisão de stop loss):
Por desempenho:
- A taxa de acerto em janela móvel de 30 dias cai abaixo de 50%
- O drawdown passa de 20% do drawdown máximo histórico do edge
- Três meses seguidos de desempenho negativo
Estatísticos:
- Desempenho recente estatisticamente pior que o backtest (>2 desvios-padrão abaixo do esperado)
- O intervalo de confiança da taxa de acerto não contém mais a taxa de acerto do backtest
Operacionais:
- Requisitos de regime não atendidos por um período prolongado
- A fonte de dados fica indisponível ou pouco confiável
- Mudanças na corretora invalidam as premissas de execução
Qualitativos:
- Mudança na estrutura do mercado que invalida a tese do edge
- Mudanças regulatórias que afetam o mecanismo do edge
- A atividade de concorrentes indica que o edge ficou saturado
Quando um critério de desligamento dispara, o edge passa para o status "suspenso". Ele pode ser reavaliado depois, mas para de operar na hora.
Tamanho da posição durante as transições
Definir o tamanho da posição com inteligência controla o risco da promoção:
Descoberta → demo: nenhuma posição (só demo)
Demo → ao vivo reduzido: 15-25% do tamanho-alvo
Ao vivo reduzido → ao vivo pleno: aumento gradual
- Semanas 1-2: 25% do alvo
- Semanas 3-4: 50% do alvo
- Semanas 5-6: 75% do alvo
- Semana 7+: 100% do alvo
Essa abordagem gradual limita o estrago se algo der errado durante a transição.
O banco de dados de promoção
A trajetória de cada edge é registrada:
| Campo | Descrição |
|---|---|
| edge_id | Identificador único |
| current_stage | DISCOVERY/PAPER/SMALL_LIVE/FULL_LIVE/SUSPENDED |
| stage_entry_date | Quando a etapa atual começou |
| paper_start_date | Quando o trading demo começou |
| paper_signals | Contagem de sinais na demo |
| paper_pnl | PnL demo acumulado |
| live_start_date | Quando começou o trading ao vivo, com dinheiro real |
| live_signals | Contagem de sinais reais |
| live_pnl | PnL real acumulado |
| notes | Observações, problemas, decisões |
Esse histórico permite análises: quanto tempo os edges costumam sobreviver? O que prevê a falha de um edge? Quais métodos de descoberta produzem edges duradouros?
Exemplo: linha do tempo da promoção de um edge
Exemplo real (anonimizado):
Dia 0: edge descoberto. Divergência de financiamento + OI no regime de alta. Taxa de acerto de 68% no backtest, 1,247 amostras.
Dia 1: passou na revisão de validação. Entrou na fila do trading demo.
Dia 14: o trading demo começou depois que a fila foi liberada.
Dia 45: trading demo concluído. 37 sinais, taxa de acerto de 65%, -3% vs o backtest. Variação aceitável.
Dia 46: promovido para o ao vivo reduzido, com 20% do tamanho.
Dia 78: ao vivo reduzido concluído. 24 operações reais, taxa de acerto de 63%, slippage de 0.08%. PnL real em 94% do esperado na demo.
Dia 79: começou a promoção gradual para o tamanho total.
Dia 107: ao vivo pleno, com 100% do tamanho.
Dia 240: ainda rodando. Janela móvel de 90 dias: taxa de acerto de 61%, desempenho um pouco abaixo do esperado, mas dentro dos limites.
Dia 312: a taxa de acerto caiu para 54% em uma janela de 60 dias. Sinal amarelo aceso.
Dia 350: a taxa de acerto continuou caindo. Suspenso para revisão.
Dia 380: post-mortem: o regime de mercado mudou, e o edge deixou de valer nas novas condições. Aposentado de vez.
Vida útil total: ~11 meses. Isso é típico—edges não duram para sempre.
Melhoria contínua sem overfitting
Edges podem ser melhorados, mas com cuidado:
Permitido:
- Filtros de regime mais rígidos com base na observação ao vivo
- Timing de saída ajustado com base nos dados de execução
- Tamanho da posição refinado com base na volatilidade realizada
Perigoso:
- Parâmetros de limiar alterados para melhorar o desempenho recente
- Novos fatores adicionados para filtrar sinais ruins recentes
- Lógica alterada para justificar os prejuízos
A diferença: mudanças baseadas em aprendizados generalizáveis vs mudanças que fazem ajuste à curva (curve fitting) nos dados recentes.
Na dúvida, não mexa. Coloque em produção uma nova versão do edge e teste do zero pelo pipeline, em vez de remendar um edge que já está ao vivo.
Principais lições
- Nunca vá direto do backtest para o trading ao vivo com tamanho total
- Pipeline: Descoberta → Demo → Ao vivo reduzido → Ao vivo pleno
- Cada etapa tem critérios de entrada e de saída, com durações mínimas
- O tamanho da posição aumenta aos poucos durante as transições
- Os critérios de desligamento definem quando parar de operar um edge
- Registre a trajetória de cada edge para aprender e analisar
- Edges têm vida útil finita—o monitoramento contínuo é obrigatório
- Melhore com cuidado para não reajustar o sistema ao ruído recente
O pipeline de promoção é o seu gerenciamento de risco para estratégias novas. Ele custa tempo e oportunidade, mas evita desastres. Um pipeline disciplinado é o que separa uma operação profissional de uma aposta com resultados de backtest.