Radar Perene / Arquivos / ciência

O que é uma meta-análise — e por que faltam em finanças no Brasil

◦ Metodologia v2.2 dos índices (working papers com DOI). Ver metodologia.

Ciência

Quando dois estudos sobre o mesmo tema chegam a conclusões opostas, o debate público escolhe o que confirma o que já acreditava e segue em frente. A ciência tem uma resposta melhor para esse empate — um gênero inteiro de pesquisa dedicado a julgá-lo. Na medicina, ele decide tratamentos; na psicologia, derrubou efeitos famosos. Em finanças no Brasil, ele quase não existe — e essa ausência diz algo sobre o estado da literatura.

Uma meta-análise é um estudo sobre estudos: reúne, por busca sistemática e critérios declarados, todas as pesquisas que testaram uma mesma hipótese, e combina seus resultados estatisticamente num efeito agregado — pesando tamanho de amostra, qualidade e a possibilidade de que resultados negativos nunca tenham sido publicados.

A definição carrega as duas propriedades que fazem do gênero o degrau mais alto da evidência empírica. A primeira é a busca sistemática: o autor não escolhe os estudos que conhece ou prefere — declara de antemão onde buscou, com que termos e que critérios de inclusão, para que outro pesquisador refaça a coleta e chegue à mesma pilha. A segunda é a combinação estatística: os resultados não são resumidos em prosa ("a maioria encontrou efeito positivo"), são agregados numericamente, com cada estudo pesando conforme sua precisão.

O que uma meta-análise enxerga que um estudo não enxerga

O valor do gênero está no que só aparece em conjunto. Um estudo isolado com efeito positivo pode ser acaso, amostra peculiar ou especificação afortunada. Vinte estudos, postos na mesma régua, revelam padrões que nenhum deles contém individualmente: se o efeito encolhe nos estudos mais recentes; se ele só aparece nos estudos com amostras pequenas — assinatura clássica de viés de publicação; se os resultados se distribuem como se os negativos tivessem sido engavetados. Ferramentas do gênero foram desenhadas exatamente para detectar essa última hipótese, porque o arquivo publicado da ciência não é uma amostra neutra do que foi testado — é uma amostra do que deu certo o bastante para ser aceito.

Em finanças internacionais, o gênero produziu resultados sóbrios e incômodos: agregações de centenas de estimativas publicadas sobre anomalias e prêmios encontraram efeitos médios bem menores do que os estudos fundadores sugeriam, com parte relevante da diferença explicada por seleção do que se publica. É o tipo de conclusão que nenhum estudo individual poderia sustentar sozinho.

O vácuo brasileiro

Ao preparar a pauta desta seção, a casa fez o levantamento que o gênero exige em miniatura: varreu os resultados de busca em português, e as bases abertas usuais, atrás de meta-análises sobre temas de finanças com dados brasileiros — prêmios de fator no mercado local, efeitos de anúncio, sazonalidades, custo de capital. O achado, documentado nos registros internos da pauta, foi um quase deserto: o termo "meta-análise" em português pertence, na prática, à saúde e à educação; em finanças, o que existe são revisões narrativas de literatura, que resumem estudos em prosa sem os dois pilares do gênero — busca sistemática e agregação estatística.

A ausência tem explicações honestas. Meta-análise exige matéria-prima: dezenas de estudos testando a mesma hipótese, com estatísticas reportadas de forma comparável. A literatura brasileira de finanças é menor, mais dispersa em métodos e menos dada à replicação direta — cada autor prefere variar a pergunta a repetir a do vizinho, porque replicação rende menos prestígio. O resultado é um acervo largo e raso, difícil de agregar. Vista de perto, a ausência de meta-análises não é só uma lacuna de gênero: é o sintoma visível de uma literatura que ainda não acumula sobre si mesma.

Para o leitor de pesquisa de mercado, a consequência prática é uma régua de modéstia: em temas brasileiros, a resposta honesta para "o que a literatura diz" é quase sempre "um punhado de estudos, com métodos diferentes, dizendo coisas parcialmente diferentes" — e quem afirma consenso está, na maior parte das vezes, citando um estudo só.

Perguntas frequentes

Meta-análise e revisão de literatura são a mesma coisa?

Não. A revisão narrativa resume estudos escolhidos pelo autor, em prosa; a meta-análise busca sistematicamente tudo o que testou a hipótese e combina os resultados numericamente. A primeira informa; a segunda mede.

Uma meta-análise pode estar errada?

Pode — o gênero herda os defeitos da matéria-prima. Se os estudos agregados compartilham o mesmo viés, a agregação o repete com mais confiança. A expressão da área para isso é direta: entra lixo, sai lixo com intervalo de confiança.

O que é viés de publicação?

A tendência de resultados positivos e significativos serem publicados com mais frequência que resultados nulos. O arquivo da ciência fica, assim, mais otimista que a realidade testada — e detectar essa distorção é uma das funções centrais da meta-análise.

Por que a medicina tem tantas e finanças tão poucas?

Ensaios clínicos são desenhados para ser comparáveis — protocolos registrados, desfechos padronizados — e a decisão que dependem deles exige agregação. Em finanças, cada estudo desenha seu próprio teste, e a comparabilidade que a meta-análise exige raramente existe de nascença.

---

Resta uma pergunta que nenhum método estatístico responde: quem paga o estudo — e o que o pagamento faz com a conclusão. É o fecho desta trilha: Conflito de interesse na pesquisa de banco.

Leituras da casa: o estado da evidência, tema a tema, aparece na leitura de hoje, no Diário.

Leia também: Conflito de interesse na pesquisa de banco · O que é peer review — e por que um estudo revisado vale mais · Reprodutibilidade em finanças: por que quase ninguém testa