Um experimento do megaprojeto SCORE, financiado pela DARPA, forneceu os mesmos dados a 457 analistas para reexaminar 100 estudos publicados, revelando que apenas 34% reproduziram o resultado estatístico original com precisão.
O megaprojeto SCORE visa avaliar a credibilidade das ciências sociais e comportamentais. Em um experimento, apresentado nesta quarta-feira na Nature, conjuntos de dados e questões de pesquisa idênticos foram entregues a pesquisadores independentes. As descobertas ressaltam a “variabilidade analítica”, decorrente de escolhas metodológicas, como a limpeza de dados ou modelos estatísticos. Entre as 504 reanálises, 74% chegaram à mesma conclusão geral que os originais, 24% foram inconclusivas e 2% opostas. “Cada análise envolve decisões metodológicas que podem influenciar os resultados”, afirmou Guiomar Niso, do Centro de Neurociencias Cajal (CNC-CSIC). O pesquisador principal, Balázs Aczél, observou que as descobertas não invalidam pesquisas anteriores, mas destacam a necessidade de reconhecer a incerteza empírica. O SCORE também examinou a reprodutibilidade e a replicabilidade. Apenas 24% dos artigos compartilharam dados publicamente; quando disponíveis, 74% foram reproduzidos aproximadamente e 54% com precisão. Em replicações com novos dados, apenas 49% obtiveram sucesso, apresentando tamanhos de efeito menores. “A pesquisa é difícil, e o trabalho árduo começa após uma descoberta”, resumiu Tim Errington, do Center for Open Science (COS). Os autores defendem maior transparência para fortalecer a confiança na ciência.
