Quando um número não conta toda a história na psicologia
Guia para distinguir associação, acompanhamento e mudanças no instrumento ao interpretar resultados numéricos em pesquisas psicológicas.
Para interpretar números de uma pesquisa psicológica sem confundir associação, comparação e causalidade, faça três verificações: identifique a natureza associativa do achado, confirme se houve avaliações posteriores e examine se o instrumento de coleta permaneceu comparável. As fontes fornecidas mostram que essas informações podem mudar o alcance de uma conclusão, mesmo quando o número publicado parece simples e preciso.[1, 2, 3]
1. O resultado descreve associação ou causalidade?
A primeira pergunta é: o estudo informou que dois elementos estavam associados ou demonstrou que um deles produziu o outro?
Em uma análise realizada por volta dos 47 anos de idade, níveis mais altos de otimismo e apoio social estiveram associados a não fumar, escolher uma alimentação saudável e manter um índice de massa corporal saudável. Essa associação foi observada independentemente da presença de adversidade social na infância.[1]
A palavra decisiva é associados. No trecho fornecido, ela sustenta a afirmação de que as características apareceram relacionadas na análise. O trecho não relata uma intervenção destinada a aumentar o otimismo ou o apoio social, nem afirma que essa mudança tenha causado os comportamentos observados.[1]
Por isso, uma leitura fiel pode dizer que níveis mais altos de otimismo e apoio social acompanharam determinados comportamentos e condições naquela análise. Não pode transformar essa relação em uma cadeia causal, como afirmar que o otimismo necessariamente levou as pessoas a não fumar ou a manter certo índice de massa corporal. Essa conclusão ultrapassaria o que a evidência fornecida relata.[1]
Também é importante separar associação de comparação. Uma pesquisa pode comparar pessoas com níveis diferentes de uma característica e encontrar diferenças entre elas. Ainda assim, a existência de grupos comparáveis no resultado não significa, por si só, que a característica examinada tenha causado a diferença. No caso citado, a informação disponível descreve associações, não uma demonstração causal.[1]
2. Houve avaliações depois do momento inicial?
A segunda verificação é temporal: em quais momentos os participantes foram avaliados?
Um estudo distribuiu 54 adultos autistas entre três condições: terapia cognitivo-comportamental on-line, programa on-line baseado em atenção plena e lista de espera. Os cursos foram planejados para durar de seis a oito semanas, incluíram acompanhamento telefônico semanal e tiveram avaliações antes, depois e aos três e seis meses.[2]
Esse desenho contém mais de um tipo de acompanhamento. O contato telefônico ocorreu semanalmente durante os cursos, enquanto as avaliações foram programadas para momentos específicos, inclusive três e seis meses depois. Esses elementos não devem ser tratados como se fossem a mesma coisa.[2]
As avaliações posteriores permitem perguntar se um resultado medido logo depois também foi examinado em momentos mais distantes. Entretanto, a simples existência dessas avaliações não prova que ocorreu melhora, que ela permaneceu ou que uma condição foi superior às outras. O trecho fornecido descreve participantes, condições, duração, acompanhamento e momentos de avaliação, mas não apresenta os resultados dessas medições.[2]
Ao ler uma notícia ou um resumo, portanto, verifique se a expressão acompanhamento significa apenas contato com os participantes ou se inclui novas medições do desfecho. Depois, confirme quais resultados foram efetivamente publicados para cada momento. No estudo citado, sabe-se que avaliações foram planejadas antes, depois e aos três e seis meses, mas a fonte permitida aqui não informa seus resultados.[2]
3. O instrumento continuou comparável?
A terceira verificação recai sobre a forma de medir. Uma mudança numérica entre dois levantamentos pode coincidir com uma alteração no questionário usado para produzir as estimativas.[3]
Em uma pesquisa nacional de saúde, uma alteração no questionário coincidiu com o aumento da prevalência estimada de autismo de 1,25% em 2011 para 2,24% em 2014. A fonte adverte que mudanças no instrumento de coleta podem produzir variações aparentes e exigem cautela ao comparar levantamentos.[3]
Isso não autoriza concluir, com base apenas nesse registro, que todo o aumento foi produzido pelo questionário. A formulação disponível é mais limitada: a alteração do instrumento coincidiu com o aumento, e essa circunstância dificulta interpretar os dois números como medidas diretamente comparáveis.[3]
A leitura deve procurar informações sobre as perguntas, sua redação e a maneira como as respostas foram obtidas em cada período. Se o instrumento mudou, o leitor precisa preservar duas possibilidades na interpretação: parte da diferença pode corresponder ao fenômeno estimado, e parte pode estar relacionada à mudança na coleta. A fonte não quantifica quanto caberia a cada possibilidade.[3]
Um exemplo compacto de leitura
Considere somente os valores de 1,25% em 2011 e 2,24% em 2014. A diferença é de 0,99 ponto percentual, equivalente a um aumento relativo aproximado de 79%. O cálculo descreve a distância matemática entre as estimativas, mas não identifica sua causa. Como houve alteração no questionário, a interpretação precisa registrar a quebra potencial de comparabilidade antes de atribuir o aumento a uma mudança equivalente na população.[3]
As três verificações produzem conclusões distintas:
- Se o texto diz associados, relate uma relação observada, sem convertê-la em causalidade.[1]
- Se há avaliações posteriores, identifique os momentos medidos e procure os resultados de cada momento, sem presumir permanência apenas porque o acompanhamento foi planejado.[2]
- Se o instrumento mudou, calcule a diferença numérica apenas como diferença entre estimativas e declare a limitação de comparabilidade.[3]
O que o número permite afirmar
Um número deve ser lido junto com o verbo usado pelo estudo, o calendário das avaliações e a estabilidade do instrumento. Nas evidências examinadas, associados delimita o tipo de relação relatada; avaliações antes, depois e aos três e seis meses descrevem o alcance temporal previsto; e a alteração do questionário introduz cautela na comparação entre anos.[1, 2, 3]
Essa leitura crítica não exige descartar o resultado. Ela exige formular uma conclusão do mesmo tamanho que a evidência disponível. Quando o trecho não apresenta efeitos, resultados posteriores ou decomposição das causas de uma variação, o limite deve ser declarado em vez de preenchido com suposições.[2, 3]
Este recorte sobre leitura de evidências se relaciona ao conteúdo relacionado do curso, enquanto o artigo permanece concentrado nas três verificações metodológicas apresentadas.
Fontes consultadas
Obras e aulas usadas na redação deste guia. Os números no texto levam a elas.
- John Santrock. Life-Span Development, capítulo 109
- Johnny L. Matson; Peter Sturmey. Autism and Child Psychopathology Series Handbook of Autism and Pervasive Developmental Disorder: Assessment, Diagnosis, and Treatment, capítulo 66
- Johnny L. Matson; Peter Sturmey. Autism and Child Psychopathology Series Handbook of Autism and Pervasive Developmental Disorder: Assessment, Diagnosis, and Treatment, capítulo 8
