Radar Perene / Arquivos / ciência

Red flags de pseudociência financeira

◦ Metodologia v2.2 dos índices (working papers com DOI). Ver metodologia.

Ciência

O material que mais engana no mercado não parece charlatanice — parece ciência. Tem gráfico, tem percentual com duas casas decimais, tem a palavra "comprovado" e, cada vez mais, tem a palavra "backtest". A pseudociência financeira moderna não nega o método científico; ela veste o figurino dele. E é justamente por isso que a defesa do leitor não pode ser a desconfiança genérica — precisa ser um checklist.

Pseudociência financeira é todo material que exibe a forma da evidência — números, gráficos, testes históricos — sem as condições que tornam evidência confiável: dados identificáveis, método descrito, resultado conferível por terceiros e limites declarados. O disfarce quantitativo não é acidente; é o produto.

O que segue é o filtro que a própria casa aplica antes de citar qualquer fonte em suas leituras. Ele existe por necessidade interna — uma publicação que cita material contaminado contamina a si mesma — e é descrito aqui sem nomes, porque o problema é um gênero, não um autor.

O checklist da casa

Os dados são identificáveis? A primeira pergunta é a mais barata: qual série, de qual fonte, em qual período. "Análise de dados históricos" sem essas três respostas não é análise — é alegação. Material sério nomeia a fonte de um jeito que permite a outro pesquisador baixar o mesmo arquivo.

O período foi escolhido ou herdado? Uma janela amostral que começa e termina em datas redondas ou no início da série disponível foi provavelmente herdada — bom sinal. Uma janela que começa num fundo de mercado e termina num topo foi provavelmente escolhida, e a escolha da janela é a forma mais simples de fabricar um resultado sem mentir sobre nenhum número.

Existe teste fora da amostra? Qualquer regra ajustada sobre um período histórico se sai bem naquele período — é o que "ajustada" significa. A pergunta científica é o que acontece nos dados que a regra nunca viu. Material que reporta apenas o desempenho dentro da amostra de ajuste está reportando a qualidade do próprio ajuste, não a da ideia.

Os custos estão na conta? Corretagem, spread entre compra e venda, impostos, deslize de execução. Estratégias de giro alto podem exibir curvas vistosas que os custos reais devolveriam ao chão. A ausência da palavra "custos" num material cheio de percentuais é eloquente.

O resultado é bom demais? Retornos altos, quedas máximas minúsculas e consistência de relógio, simultaneamente, descrevem uma combinação que as décadas de literatura de finanças documentaram como raríssima — inclusive entre profissionais com equipe e infraestrutura. O material que a exibe com naturalidade pede que o leitor acredite no extraordinário sem oferecer o extraordinário em prova.

Quem lucra se o leitor acreditar? A última pergunta não é sobre o gráfico — é sobre o incentivo de quem o mostra. Resultado que conclui exatamente o que o vendedor precisava concluir merece a leitura mais lenta de todas.

O caso central: o backtest de curso

O exemplo que amarra o checklist inteiro é um gênero recorrente no material de divulgação de cursos e estratégias no Brasil: o backtest exibido como prova de que "a regra funciona". A casa não vende curso nem estratégia — pode descrever o mecanismo sem conflito, e o mecanismo merece descrição porque é pedagógico.

O roteiro típico falha no checklist em cascata. Os dados raramente são identificáveis com precisão; o período é frequentemente favorável à regra exibida; o teste fora da amostra quase nunca aparece; os custos são omitidos ou tratados como detalhe. Mas o defeito estrutural é anterior a todos esses: a regra exibida é sobrevivente de uma seleção que o espectador não vê. Quem monta o material testou variantes — combinações de parâmetros, janelas, indicadores — e mostra a que deu certo no passado. Esse processo, descrito em detalhe nos artigos desta seção sobre overfitting e p-hacking, produz curvas bonitas com a mesma confiabilidade com que uma loteria produz ganhadores: sempre há um, e ele nunca sabe por quê.

Por isso o backtest de curso quase nunca sobrevive fora da amostra — não por má-fé necessária de quem o exibe, mas por construção. Uma regra selecionada por ter vencido no passado carrega o passado embutido em si; o futuro, que não participou da seleção, não tem obrigação nenhuma com ela. A literatura acadêmica que tentou replicar centenas de "anomalias" publicadas — com dados e métodos declarados, o que é o oposto do gênero aqui descrito — já encontrou taxas altas de encolhimento ou desaparecimento dos efeitos depois da publicação. O que a seleção invisível de um material comercial produziria, o leitor pode estimar.

O que este filtro não é

O checklist separa evidência de encenação de evidência; não separa gestores bons de ruins, nem prevê o desempenho de ninguém. Material que passa nas seis perguntas pode estar errado do mesmo jeito — a ciência honesta erra com frequência, e o acervo desta casa registra os próprios vereditos que envelheceram mal. A diferença é que o erro honesto é visível e corrigível; a encenação é construída para que o erro nunca apareça.

Perguntas frequentes

Todo backtest é pseudociência?

Não — o backtest é ferramenta legítima e central da pesquisa quantitativa. O que o degrada é o uso: sem dados identificáveis, sem teste fora da amostra, sem custos e sem a contagem de quantas variantes foram tentadas, ele deixa de ser teste e vira retórica visual.

Um material com muitos números não é, por definição, mais confiável?

A densidade numérica não é indicador de confiabilidade — é indicador de figurino. A pergunta útil não é quantos números há, e sim se algum deles pode ser conferido por quem lê.

Por que gráficos convencem tanto?

Uma curva ascendente comprime anos de suposto desempenho num único estímulo visual, e o olho não audita eixos, janelas nem custos. O gráfico é o formato ideal para transportar uma conclusão sem transportar as condições dela.

Existe selo ou certificação que resolva o problema?

Nenhum selo substitui as seis perguntas. Regulação impõe deveres a quem se apresenta como analista ou gestor, mas o gênero descrito aqui circula em formatos — cursos, redes, comunidades — que ficam fora desse perímetro na maior parte do tempo.

---

O checklist protege contra o material que imita um estudo. O degrau seguinte da trilha é a ferramenta que a ciência usa para julgar muitos estudos de uma vez — e um vácuo curioso da literatura brasileira: O que é uma meta-análise.

Leituras da casa: as fontes que sobrevivem a esse filtro alimentam a leitura de hoje, no Diário; os episódios em que o próprio arquivo se corrigiu estão no Atlas.

Passar um material específico por essas seis perguntas, com o documento na mesa, é o tipo de segunda opinião que a casa dá sob consulta.

Leia também: O que é uma meta-análise — e por que faltam em finanças no Brasil · Overfitting em backtest não é sobre trading, é sobre método · Viés de sobrevivência: por que séries 'vencedoras' enganam