thepsychologist.bps.org.uk/volume-30/august-2017/repent-and-reform
Nos últimos anos, a disciplina de psicologia vem passando por um período de autocrítica metodológica e debate que costumamos chamar de ‘crise de replicação’. Começou em 2011 e aumentou em 2015 com a publicação dos resultados do Projeto de Reprodutibilidade que foram amplamente interpretados como mostrando que talvez apenas uma em cada três descobertas da psicologia seja de fato confiável. O professor Chris Chambers oferece o primeiro grande livro a emergir desse debate.
Sua premissa é que a psicologia está de fato em uma posição perigosa e pode em breve cair no esquecimento na jornada da ciência em geral, tornando-se, mais cedo ou mais tarde, pouco mais do que um conto preventivo de mais uma protociência que nunca chegou à maturidade. O livro visa expor as causas primárias desse preocupante estado de coisas e, como o título indica, identifica sete principais fatores (ou ‘pecados’) contribuintes. São eles: vieses de publicação que exigem resultados inéditos e positivos; o jogo de testes estatísticos para sempre alcançar significância estatística; nosso uso de estudos de baixa potência e nossa aversão a estudos de replicação; nossa atitude egoista em relação aos nossos próprios dados empíricos; o problema da fraude absoluta; publicação de acesso fechado; e nossa obsessão por métricas de proxy para quantificar a qualidade. Como consequência dessa coleção de problemas, a disciplina da psicologia tornou-se um sistema para a produção em massa de descobertas falsas: lixo científico é embalado e vendido como ouro científico, e destituímo-nos a nós mesmos de nosso tão celebrado mecanismo de auto-correção para, posteriormente, erradicar e descartar esses erros.
O que eu mais valorizo neste livro é a profundidade e a seriedade do seu tom. Seria fácil baratear ou sensacionalizar este tópico. Afinal, a crise de replicação tornou-se um assunto popular de debate dentro da psicologia. Chegou até mesmo à grande mídia, onde às vezes foi, infelizmente, sensacionalizada (lembre-se, por exemplo, da manchete do Independent, de agosto de 2015, sobre o projeto de reprodutibilidade: ‘Estudo revela que grande quantidade da pesquisa em psicologia realmente é apenas ‘psico-baboseira”). Além disso, o debate, geralmente, desenrola-se no mundo selvagem das mídias sociais, onde a discussão às vezes se torna pouco edificante, para dizer o mínimo. No livro de Chambers, a discussão é sempre detalhada e cuidadosa. Todos os argumentos são sustentados por amplas evidências. Na verdade, as extensas notas finais do livro são um tesouro de fatos e referências relevantes e, por si só, servem como uma bibliografia comentada de toda a crise de replicação. Não há tentativa de tornar bode expiatório e difamar nenhum indivíduo ou subcampo ou método em particular (por exemplo, o humilde valor-p não é tratado como um bode expiatório, como às vezes aconteceu no passado, mas é tratado de forma justa no contexto de discussão mais geral de testes estatísticos). Mesmo que não se concorde totalmente com o diagnóstico ou prognóstico de Chambers, acho que ninguém poderia ver este livro como nada menos do que uma análise detalhada, cuidadosa e razoável do estado atual da psicologia.
Em última análise, esta não é simplesmente uma descrição de um problema, mas um apelo à responsabilidade e ação coletiva. Sua perspectiva geral é que criamos, coletivamente, essa cultura problemática e devemos assumir isso e, então, tomar as medidas necessárias para reformar o campo. Essas medidas para a reforma às vezes são óbvias e podem ser implementadas imediatamente por qualquer um de nós (por exemplo, o que está impedindo qualquer um de nós de realizar estudos de alta potência, pré-registrar publicamente nossas hipóteses e métodos, compartilhar todos os nossos dados e materiais empíricos, e assim por diante?), e, portanto, tudo o que é necessário é apenas uma mudança em nossa cultura e valores. Claro, a cultura pode ser surpreendentemente intratável. A tendência dominante de qualquer grupo ou organização é sempre a favor da manutenção do status quo. O que importa para o futuro da psicologia é quão bem os defensores da reforma conseguem convencer a maioria a superar sua aversão natural à mudança. A este respeito, este é um livro importante e que espero que seja amplamente lido e discutido. Ele reúne todos os argumentos sobre as inadequações de nossas práticas científicas atuais e fornece exemplos detalhados das muitas opções que temos para a reforma, e o faz de maneira geralmente positiva e construtiva, sem nunca ser divisiva e combativa.
Mark Andrews (Universidade de Nottingham Trent)
