Radar Perene / Arquivos / ciência

Viés de sobrevivência: por que séries 'vencedoras' enganam

◦ Metodologia v2.2 dos índices (working papers com DOI). Ver metodologia.

Ciência

Na Segunda Guerra, os aviões que voltavam das missões chegavam crivados de balas nas asas e na fuselagem — e o comando queria blindar exatamente esses pontos. O estatístico Abraham Wald respondeu com a observação que virou aula: os furos visíveis marcavam onde um avião podia ser atingido e ainda assim voltar. Os pontos que mereciam blindagem eram os que apareciam intactos nos sobreviventes — porque os aviões atingidos ali não voltavam para serem examinados.

Viés de sobrevivência é o erro de tirar conclusões apenas do que sobreviveu para ser observado — fundos que não fecharam, empresas que não saíram da bolsa, séries que não foram descontinuadas — como se os desaparecidos nunca tivessem existido. A amostra parece completa; falta justamente a metade que carrega a lição.

Oitenta anos depois, o mercado financeiro repete o erro do comando aéreo em escala industrial — e quase sempre sem um Wald por perto.

Onde os desaparecidos se escondem

O viés opera em silêncio porque a ausência não deixa rastro na planilha. Três exemplos bastam.

A rentabilidade média dos fundos de uma categoria, calculada sobre os fundos existentes hoje, exclui por construção todos os que fecharam pelo caminho — e fundos fecham, com frequência, por desempenho ruim. A média dos vivos é sistematicamente mais bonita que a média da turma que começou.

A carteira "das melhores ações da década" sofre do mesmo defeito ao contrário: escolher hoje as empresas vencedoras e medir o retorno que teriam dado é garantir o resultado antes do teste. Ninguém, dez anos atrás, dispunha da lista dos sobreviventes.

E o índice de bolsa, referência de quase todo backtest, é ele próprio um comitê de sobreviventes: empresas deslistadas, incorporadas ou rebaixadas saem da cesta e das memórias. Um teste feito sobre a composição atual do índice, estendido ao passado, testa uma carteira que jamais existiu.

Há ainda a versão deliberada do viés, que beira o golpe: o folclore financeiro registra o esquema da newsletter que envia previsões opostas a dois grupos de leitores, descarta a metade que errou e repete o corte por rodadas — ao fim, um pequeno grupo recebeu uma sequência perfeita de acertos e nunca soube que foi selecionado, não informado. Nenhum gestor sério opera assim; mas todo material que exibe apenas vencedores reproduz, em dose homeopática, a mesma aritmética.

Por que o problema é maior no Brasil

Em mercados grandes, o universo de ações é largo o bastante para diluir alguns desaparecimentos. O caso brasileiro é menos confortável: o conjunto de empresas efetivamente negociáveis na B3 é pequeno e mudou de composição várias vezes ao longo das últimas décadas — ondas de abertura de capital, ondas de fechamento, longos períodos de esvaziamento. Qualquer estudo de duas décadas atravessa, na prática, universos diferentes com o mesmo nome.

A consequência para o leitor de pesquisa é direta: em amostra pequena e mutável, cada sobrevivente pesa mais, e o viés que seria um arredondamento em Nova York vira distorção em São Paulo. É por isso que a casa trata a definição do universo como decisão de método, não como rodapé: os estudos declaram qual conjunto de ativos entra, em qual período, e com qual regra de inclusão — antes de qualquer conclusão. O verbete sobre amplitude de mercado mostra essa preocupação em operação: medir quantos ativos participam de um movimento só faz sentido se o denominador — quem existia e negociava naquela data — for honesto.

Reconstruir séries a partir do dado bruto, com o universo de cada data como ele era, custa caro em tempo e é invisível no produto final. O leitor não vê a diferença entre um estudo que fez esse trabalho e um que baixou a série pronta dos sobreviventes. Até o dia em que vê.

A régua para ler qualquer série "vencedora"

Diante de qualquer histórico impressionante — de fundo, de estratégia, de carteira —, a pergunta de Wald continua sendo a ferramenta completa: quem não voltou da missão? Quantos fundos dessa gestora fecharam? Quantas ações desse filtro saíram da bolsa no meio do caminho? Quantas estratégias irmãs dessa foram testadas e abandonadas?

Quando o material não responde a essas perguntas, a omissão é a resposta: o histórico descreve os sobreviventes, e sobre os desaparecidos ele nada sabe — nem o leitor deveria fingir que sabe.

Perguntas frequentes

Viés de sobrevivência é o mesmo que p-hacking?

São parentes, não gêmeos. O p-hacking seleciona entre testes; o viés de sobrevivência seleciona entre dados. Nos dois casos, o que desaparece do relatório é o que mudaria a conclusão.

Índices de bolsa são inúteis para pesquisa, então?

Não — são úteis desde que tratados como o que são: carteiras com regras de entrada e saída, não retratos neutros do mercado. O erro é projetar a composição de hoje sobre o passado.

Como se corrige o viés na prática?

Com bases que preservam os mortos (ativos deslistados, fundos encerrados) e com a regra de ouro de reconstruir cada data com o universo daquela data. Dá trabalho; é exatamente por isso que se vê tão pouco.

O viés só afeta quem faz backtest?

Afeta qualquer leitura retrospectiva — inclusive as biografias de investidores célebres: para cada trajetória famosa, houve uma multidão de trajetórias idênticas no método que terminaram no anonimato e fora da estatística.

---

Se os dados podem enganar por quem falta, a etapa seguinte da trilha pergunta quem confere quem escreve: O que é peer review.

Leituras da casa: o universo declarado de cada data aparece na leitura de hoje, no Diário, e a memória que inclui os desaparecidos vive nos precedentes, no Atlas.

Verificar se uma série específica carrega esse defeito — e quanto ele muda a conclusão — é trabalho de bancada, do tipo que a casa faz por encomenda.

Leia também: O que é peer review — e por que um estudo revisado vale mais · O que é amplitude de mercado? · Mudar de nível não é mudar de regime