Mudar metodologia pode tornar crível quase qualquer tese, afirma 'Nature' - 23/10/2015 - Ciência - Folha de S.Paulo
David W Cerny - 7.jun.2013/Reuters
23/10/2015 02h02
Jogadores de futebol negros são bem mais propensos a levar cartão vermelho durante os jogos, afirma um estudo publicado na revista científica "Nature".
Jogadores negros levam tantos cartões vermelhos quanto os jogadores brancos, aponta uma nova pesquisa na revista "Nature".
"A maioria dos pesquisadores consideraria isso perturbador", escrevem os autores.
"Isso significa que tomar qualquer análise individual a sério demais pode ser um erro, ainda que isso seja encorajado pelo nosso sistema de publicação científica e pela cobertura da mídia."
Casos individuais extremos –jogadores que levam muito mais cartões que os outros, por exemplo– são excluídos para que não "contaminem" os dados? Dois cartões amarelos entram na conta ou só os puramente vermelhos? E jogadores mestiços?
E olhe que cartões vermelhos e cor da pele são coisas fáceis de se medir e tabular. Imagine o que acontece quando os estudos envolvem comportamentos subjetivos de voluntários, como no caso da psicologia, ou inferências sobre causa e consequência na economia. Com a metodologia "certa", prova-se qualquer coisa.
Em geral, espera-se que até 5% das pesquisas fujam do esperado. Mas as pesquisas não chegam com uma etiqueta dizendo "eu sou o 5% de resultados bizarros".
Vários estudos têm demonstrados que, quanto mais surpreendente o resultado de um estudo, maior a chance de ele ser um falso positivo ou negativo. É até meio óbvio: são casos de "é bom demais para ser verdade".
Para piorar a coisa, os autores lembram que "na vida real" há ainda mais um motivo para desconfiar de estudos científicos isolados.
Mesmo ignorando a fraude proposital, que tipo de "forcinha" metodológica involuntária um cientista pode fazer quando ninguém está olhando? E se após quatro anos de doutorado você começasse a sentir que sua hipótese de trabalho simplesmente não diz nada?
Como testar isso? Estabelecer um comitê para avaliar se cada falta realmente valia cartão? Mas se coisas concretas como a contagem de cartões já criam viés, imagine as opiniões de um grupo de pessoas sobre o "merecimento" desses cartões...