Radar Perene / Arquivos / ciência

Intervalo de confiança: o que um número diz — e o que cala

◦ Metodologia v2.2 dos índices (working papers com DOI). Ver metodologia.

Ciência

Toda média histórica de mercado viaja pelo noticiário como um passageiro sem bagagem: "a bolsa rendeu tanto por cento ao ano", e ponto. O número parece sólido porque chega sozinho. Mas qualquer média calculada sobre um passado limitado carrega uma segunda informação, quase sempre deixada no balcão de embarque: a precisão com que aquele número foi medido. Duas médias idênticas podem esconder realidades opostas — uma cravada por um século de dados regulares, outra chutada a partir de duas décadas turbulentas. O leitor que recebe só o número não tem como distinguir a régua da adivinhação.

Um intervalo de confiança é a faixa de valores compatível com os dados observados, dado o método usado: em vez de um número único, declara-se a margem dentro da qual a medida verdadeira caberia na grande maioria das repetições do mesmo exercício. É o número acompanhado da própria incerteza — a bagagem que a manchete despacha.

O conceito é ensinado em qualquer curso introdutório de estatística e, ainda assim, quase nunca aparece onde mais faria falta: na leitura cotidiana de mercado, onde médias, retornos "típicos" e probabilidades circulam nus.

O que a faixa diz

A intuição não precisa de fórmula. Quem mede a mesma coisa muitas vezes — a média de retorno de um índice, a frequência de um padrão — obtém resultados ligeiramente diferentes a cada amostra, porque cada amostra é um recorte do acaso. O intervalo de confiança responde à pergunta honesta: considerando o tamanho e a variabilidade do que foi observado, quão longe o valor verdadeiro poderia razoavelmente estar do valor medido?

Três consequências práticas saem daí, e as três contrariam hábitos do noticiário. Primeiro: amostras curtas geram faixas largas — e séries financeiras, mesmo as com décadas, são curtas para o tanto que oscilam, de modo que médias de retorno célebres carregam margens constrangedoramente amplas. Segundo: uma diferença entre dois números só é informativa se for maior que a imprecisão de ambos — "o fundo A rendeu mais que o B" pode ser ruído puro. Terceiro: quando a faixa de um efeito estimado inclui o zero, os dados não distinguem o efeito de coisa nenhuma — e essa é, silenciosamente, a situação de boa parte dos padrões anunciados em pesquisa de mercado.

O que a faixa não diz

O intervalo de confiança também é vítima de uma leitura errada tão difundida que merece parágrafo próprio. Um intervalo "de 95%" não afirma que há 95% de chance de o valor verdadeiro estar dentro daquela faixa específica — afirma que o procedimento que gera essas faixas acerta o alvo em cerca de dezenove de cada vinte repetições. A diferença parece pedante e não é: a primeira leitura trata a faixa como profecia; a segunda, como o desempenho declarado de um instrumento. Instrumentos falham uma vez em vinte — por construção, e sem avisar em qual vez.

Há um parentesco direto com o vizinho de trilha: o mesmo "um em vinte" que define a convenção de significância é o que o p-hacking explora ao repetir testes em silêncio. Quem entende a faixa como desempenho de instrumento entende por que rodá-lo vinte vezes e mostrar o melhor resultado destrói a garantia.

Como a casa escreve a incerteza

Esta casa lida com o problema por uma via editorial: a incerteza entra na frase, não na nota de rodapé. Quando um ensaio do acervo descreve a amplitude dos desfechos históricos de um regime, a forma preferida é a linguagem de frequência simples — "nove em cada dez episódios ficaram abaixo de tal marca" — porque ela carrega a margem dentro da própria sintaxe, sem exigir vocabulário técnico do leitor. E quando a estimativa não permite afirmação nenhuma, a regra da casa é dizer isso com todas as letras.

O caso mais público dessa disciplina é um estudo próprio: o working paper The Tactical Ânima Index perguntou se leituras extremas de um indicador da casa ofereciam vantagem tática — e a conclusão publicada registra que a vantagem testada não se sustenta. É a linguagem de quem olhou a faixa inteira em vez de se apaixonar pelo centro dela: um efeito cuja incerteza engole o próprio tamanho não é um efeito reportável. Em números: o estudo está público no Zenodo, com DOI ativo e a conclusão adversa no corpo do texto — verificável por qualquer leitor.

Perguntas frequentes

Intervalo de confiança e margem de erro são a mesma coisa?

Quase. A margem de erro é a metade da largura do intervalo — a forma abreviada que as pesquisas eleitorais popularizaram. O intervalo declara a faixa completa; a margem, a distância do centro até a borda.

Um intervalo largo significa que o estudo é ruim?

Não — significa que os dados disponíveis sustentam pouco. A faixa larga honesta é superior ao número único ilusório: ela informa exatamente quanto ainda não se sabe. Suspeito é o estudo de amostra curta com faixa estreita demais.

Por que os relatórios de mercado raramente mostram intervalos?

Faixas largas desvalorizam manchetes — "retorno esperado entre perda e ganho expressivos" não vende relatório. A omissão costuma ser comercial, não técnica: a incerteza foi calculada e ficou na gaveta, ou nunca foi calculada.

Com 95% de confiança, posso agir como se o valor verdadeiro estivesse na faixa?

A faixa descreve o que os dados sustentam; o que fazer com ela envolve custos, riscos e contexto que a estatística não decide. Este artigo descreve a ferramenta — a decisão pertence a quem a toma.

A faixa mede a incerteza dentro de um mundo estável. Mas e quando o próprio mundo troca de regras no meio da amostra — e a média de ontem passa a descrever um regime que já acabou? É o assunto do próximo passo: Regime switching: quando a regra muda no meio do jogo →

Leituras da casa: a leitura de hoje, no Diário · os precedentes, no Atlas.

Calcular a faixa honesta em torno de um número específico que o leitor tenha em mãos é exercício de bancada — do gênero que a casa conduz sob consulta.

Leia também: Regime switching: quando a regra muda no meio do jogo · Significância estatística não é relevância econômica · O que é uma anomalia estatística?