Radar Perene / Arquivos / ciência

Da autoavaliação ao dado aberto: fechando o ciclo entre o que a casa audita e o que ela publica

◦ Metodologia v2.2 dos índices (working papers com DOI). Ver metodologia.

Ciência

Vistas de perto, as peças desta trilha parecem assuntos separados: um vazio regulatório aqui, uma regra de parada ali, uma taxa de acerto publicada, um crivo de citação, um pacote de dados com hash. Vistas de longe, elas desenham uma única figura — e este fechamento existe para que o leitor a veja inteira antes de seguir. A figura é um ciclo, e ele gira sempre na mesma direção: de dentro para fora.

O padrão que atravessa todo o acervo da casa é um ciclo de quatro tempos: auditar internamente, sob critérios definidos antes; decidir o que abre, sob um custo declarado; publicar o que atravessou, com DOI e versões que ninguém pode reescrever; e devolver o dado verificável, para que o leitor confira em vez de confiar. Cada tempo alimenta o seguinte, e o último alimenta o primeiro — porque tudo o que ficou público vira matéria da próxima auditoria.

O ciclo, contado como caminho de um estudo

Acompanhe um estudo hipotético da casa pelo circuito, e as peças da trilha se encaixam sozinhas. Ele nasce na bancada e enfrenta primeiro o crivo interno — o reteste sob variantes, a regra que o encerra se a estatística central não voltar, a avaliação periódica que o reexamina mesmo depois de aprovado. Se sobrevive, chega à segunda estação: a decisão de abertura, que pesa se o material aguenta ser eterno e em que grau — conceito sempre; fórmula, só quando a abertura fortalece; dados, quando a documentação sustenta o depósito.

O que atravessa é publicado no repositório com DOI, versões preservadas, revisões possíveis apenas às claras. E o que foi publicado devolve dado verificável — planilhas com verificação de integridade, achados confrontáveis, uma taxa de acerto que entra na conta seguinte. O ciclo fecha onde começou: o material público é auditado de novo, e o que envelhecer mal será revisado em público, como a série da casa já fez mais de uma vez. Não há estação final; há voltas.

Por que a ordem dos tempos importa

O ciclo funciona porque cada tempo só recebe o que o anterior aprovou. Uma casa que publicasse primeiro e auditasse depois estaria pedindo ao leitor que financiasse seus rascunhos com a própria confiança. Uma casa que auditasse para sempre e nunca abrisse estaria pedindo confiança sem oferecer superfície de verificação. E uma casa que abrisse sem devolver o dado estaria oferecendo conclusões auditáveis apenas na aparência. Os quatro tempos, na ordem certa, são o que permite a frase que resume esta trilha inteira: nada do que a casa afirma em público exige confiança — exige, no máximo, o trabalho de conferir.

Esse desenho não nasceu de virtude; nasceu do vazio descrito na abertura da trilha. Onde não há supervisor, ou a operação constrói o próprio circuito de cobrança, ou opera sem nenhum. O ciclo é a resposta da casa — e, como a peça anterior registrou, é uma resposta que outros provedores podem adotar.

De volta ao começo — dos dois trilhos

Este artigo encerra a segunda grande trilha do acervo de ciência: a que contou os estudos da casa — os índices publicados, os achados que sobreviveram e os que caíram, a governança em volta. Ela foi escrita sobre os alicerces da primeira, que explicou os conceitos com que tudo aqui foi construído — do modo como nasce uma pesquisa até as réguas de leitura. Quem chegou até este ponto pela segunda trilha tem o caminho natural de volta: começar a primeira pelo início, com o que é um working paper — o formato que carrega toda a produção pública da casa —, ou revisitar como um dado aberto brasileiro vira pesquisa. E quem quiser refazer esta trilha desde a primeira pergunta encontra a estação inicial em bater o benchmark trivial, onde a régua da casa começa a ser aplicada aos próprios índices.

O acervo completo de estudos, com DOIs e versões, permanece reunido na página de pesquisa — que é, no fim, o ciclo inteiro visto de uma vez: o que a casa auditou, decidiu abrir, publicou e devolveu em dado. O resto é a próxima volta.

Perguntas frequentes

O ciclo é uma metodologia formal ou uma descrição depois do fato?

As regras que o compõem — reteste, regra de parada, cadência de autoavaliação, critério de abertura — existem por escrito e antes dos episódios a que se aplicam; esta trilha as apresentou uma a uma. O que este fechamento acrescenta é só a visão de conjunto: as regras sempre foram tempos do mesmo circuito.

O que o leitor consegue verificar do ciclo, na prática?

As saídas de cada volta: os working papers com DOI e versões preservadas, as revisões admitidas nos próprios textos, o pacote de dados com verificação de integridade, a prestação de contas periódica da produção editorial. O circuito interno não é visível; suas consequências públicas são o que ele existe para produzir.

O ciclo garante que o acervo está certo?

Não — garante que o acervo é corrigível às claras, que é o máximo que um sistema honesto promete. A diferença entre as duas promessas é o assunto de toda esta trilha.

Por onde continuar a leitura?

Pelo trilho que faltar: os conceitos, começando por o que é um working paper; ou os estudos, desde bater o benchmark trivial. Os dois se cruzam o tempo inteiro — por desenho.

---

O ciclo recomeça onde o acervo começou: O que é um working paper — e por que a casa publica os seus →

Leituras da casa: a leitura de hoje está no Diário; os episódios em arquivo, no Atlas; os estudos completos, na página de pesquisa.

O que o ciclo não entrega em artigo — a volta aplicada a uma pergunta específica do leitor — segue onde sempre esteve: na conversa.

Leia também: O que é um working paper — e o que ele não é · Bater o benchmark trivial: o teste que todo índice da casa precisa passar antes de existir · Ipeadata: onze mil séries que viram pesquisa