Sport Psychology and Performance Meta-Analyses: A Systematic Review of the Literature

Status de retratação: OK: nenhuma retratação ou expression of concern encontrada (busca dedicada pelo DOI, sem resultado de retratação).

Texto completo avaliado: Sim.

Desenho do estudo: Revisão sistemática de meta-análises (“umbrella review” / revisão de segunda ordem). Reúne 30 meta-análises publicadas entre 1983 e 2021, cobrindo 16 construtos distintos de psicologia do esporte, e agrega os tamanhos de efeito dessas meta-análises numa síntese quantitativa própria (não é só uma revisão narrativa das meta-análises, é uma meta-análise das meta-análises).

O que esse desenho pode/não pode afirmar: Uma revisão sistemática de meta-análises fica no topo da hierarquia de evidência pra perguntas de “esse conjunto de intervenções/construtos afeta desempenho, em média, através da literatura toda?”. É o desenho mais adequado que existe pra essa pergunta específica. O que ela não pode fazer é compensar limitações que já estavam nos estudos primários originais (ex: se a maioria dos estudos de um construto usa medida de autorrelato, isso permanece uma limitação mesmo depois de agregado em 3 camadas de síntese).

Checagem de spin: Texto bem comedido. O abstract já separa claramente efeito positivo (d=0,51) de efeito negativo (d=-0,21) sem misturar as duas direções numa “média geral” enganosa. A discussão é explícita sobre heterogeneidade entre construtos (mindfulness d=1,35 “muito grande” baseado em só 3 estudos primários vs. construtos com d=0,15-0,20) e chega a alertar os próprios profissionais da área: “seria sensato os praticantes evitarem prometer demais os benefícios dos serviços de psicologia do esporte… e talvez entregar de menos como resultado”. Esse é o tipo de cautela que a Athos cobra da literatura, e aqui ela apareceu.

Avaliação metodológica: AMSTAR-2 (ferramenta padrão pra revisão sistemática/meta-análise; aplicada aqui a uma revisão de meta-análises, o nível “de segunda ordem” mais próximo que a tabela de ferramentas da Athos cobre).

• Pergunta com componentes PICO: sim, bem definida (população: atletas/praticantes de esporte; constructos de psicologia do esporte; comparação implícita correlacional ou intervenção vs. controle; desfecho: desempenho esportivo).
• Protocolo registrado previamente numa base: não. Os autores admitem isso diretamente (“We did not register our review protocol in a database”), mas dizem ter especificado busca, critérios e análise por escrito antes de rodar a revisão (protocolo não registrado publicamente, mas pré-especificado).
• Busca abrangente: parcial. Usaram só a interface EBSCOhost (bases APA PsycINFO, ERIC, Psychology and Behavioral Sciences Collection, SPORTDiscus) mais histórico pessoal dos autores e contatos de pesquisa. Não usaram Web of Science, Scopus ou Google Scholar como bases adicionais independentes. Sem restrição de idioma (ponto positivo, mais abrangente que a revisão de self-talk de 2011 do mesmo acervo).
• Seleção e extração de dados em duplicidade: sim, processo bem documentado, com verificação cruzada entre os autores e resolução de discrepância por discussão.
• Lista de estudos excluídos com justificativa: sim, via fluxograma PRISMA completo (Fig 1: 139 registros triados, 77 excluídos na triagem, 62 avaliados na íntegra, 32 excluídos com motivo, 30 incluídos). Mais rigoroso nesse ponto que a revisão de 2011.
• Avaliação de risco de viés dos estudos incluídos com ferramenta formal: parcial, com ressalva importante. Os autores classificaram a qualidade de cada uma das 30 meta-análises usando um checklist de 25 itens baseado no PRISMA, com dois avaliadores independentes e confiabilidade entre avaliadores calculada e reportada (excelente prática, muito acima da revisão de 2011, que não fez nenhuma avaliação formal). A ressalva: PRISMA é um checklist de relato/transparência, não uma ferramenta de risco de viés de verdade (o mesmo ponto que a metodologia da Athos já registra sobre o STROBE), então essa “nota de qualidade” mede o quão bem a meta-análise foi relatada, não necessariamente o quão baixo é o risco de viés real dela.
• Fontes de financiamento dos estudos incluídos: não reportadas.
• Métodos estatísticos apropriados: sim, converteram todos os efeitos (r e SMD) pra uma métrica comum (d de Cohen) via calculadora validada, calcularam médias ponderadas com erro padrão e teste de significância, e compararam subgrupos formalmente (Tabela 3). Isso é uma segunda camada real de síntese quantitativa, não “contagem de votos”.
• Avaliação do impacto do risco de viés (aqui, da nota de qualidade) nos resultados: sim, testaram formalmente se meta-análises de qualidade mais alta vs. mais baixa (divisão pela mediana) produziam efeitos diferentes; não encontraram diferença significativa.
• Viés de publicação investigado: não, no nível da própria revisão (não há funil de publicação nem teste de Egger pras 30 meta-análises agregadas). Algumas das meta-análises individuais podem ter testado isso internamente, mas a revisão-mãe não testa vício de publicação no seu próprio nível de síntese.
• Conflito de interesse / financiamento da própria revisão: reportado de forma limpa e explícita (ver abaixo).

Combinando os itens críticos (sem protocolo registrado, ferramenta de qualidade que mede relato e não risco de viés de verdade, sem teste de viés de publicação no nível da revisão), pelos critérios rígidos do AMSTAR-2 essa revisão ainda cairia tecnicamente em “confiança criticamente baixa”. Dito isso, e é importante dizer isso pra não jogar tudo no mesmo saco, essa revisão é substancialmente mais rigorosa que a revisão de self-talk de 2011 do mesmo acervo: tem síntese quantitativa de verdade (não vote counting), fluxograma PRISMA completo com exclusões justificadas, nota de qualidade com confiabilidade entre avaliadores testada, e declaração limpa de conflito de interesse e financiamento. O selo “criticamente baixo” do AMSTAR-2 é o mesmo pros dois estudos, mas esconde uma diferença real de cuidado metodológico entre eles.

Conflito de interesse / financiamento: Declarado explicitamente: “Os autores declararam que não existem conflitos de interesse” e “Os autores não receberam financiamento específico para este trabalho”. Editor acadêmico responsável (Claudio Imperiati, European University of Rome) também declarado. Um dos padrões mais limpos e transparentes já vistos neste acervo.

Avaliação estatística:

• Conceito usado: conversão de todos os tamanhos de efeito (correlação r e diferença de médias padronizada SMD) pra uma métrica única (d de Cohen), permitindo comparação direta entre meta-análises que originalmente usavam métricas diferentes. Interpretação de magnitude usando as bandas de Cohen (0,20 pequeno, 0,50 médio, 0,80 grande) mais uma categoria extra de “muito grande” (≥1,30).
• Adequação: a conversão é uma prática aceita e documentada (calculadora citada), mas conversões de r para d sempre carregam alguma perda de precisão. Não é um problema grave, só um ponto de atenção pra não tratar os valores finais como exatos.
• Ponto de atenção real: a divisão “qualidade mais alta vs. mais baixa” foi feita por mediana (split mediano) de uma pontuação contínua de 25 pontos, em vez de tratar a qualidade como variável contínua numa meta-regressão. Split mediano é uma prática estatisticamente mais fraca, perde poder estatístico e informação, e com só 15 meta-análises de cada lado, a ausência de diferença significativa encontrada pode refletir falta de poder tanto quanto ausência real de diferença. Os autores são honestos sobre isso (“embora não significativamente [diferente]”), mas vale registrar que “não achamos diferença” aqui é mais fraco do que soa.
• Comparação achado vs. conclusão: proporcional. Os autores não dizem “psicologia do esporte funciona”, dizem “o efeito médio é pequeno a moderado, com variação substancial por construto, e mesmo efeitos pequenos podem ter valor prático em nível de elite”. Isso é bem calibrado.
• Sinais de p-hacking/data dredging/HARKing: baixo risco. As comparações de subgrupo (qualidade, tipo de desenho) foram poucas (4 testes na Tabela 3) e nenhuma delas deu resultado significativo, não há padrão de “farejar” significância. A categorização de construtos como “hipoteticamente positivos” ou “negativos” pra desempenho é feita com base em teoria prévia da área (ex: ansiedade cognitiva esperada como negativa, confiança como positiva), não construída depois de ver os dados, baixo risco de HARKing.

Periódico: PLOS ONE: SJR ≈ 0,8-1,0, Q1 em categoria multidisciplinar (SCImago). Não é MDPI nem Frontiers, sem sinalização de atenção redobrada por esse critério. Vale nota à parte (não é sinalização Athos, é característica conhecida do periódico): a PLOS ONE aceita artigos com base em solidez metodológica, não em “impacto” ou novidade percebida. Isso não desqualifica o artigo, só explica por que um jornal “multidisciplinar” genérico publica um estudo de nicho tão específico como esse.

Contexto na literatura: O artigo em si é uma síntese de segunda ordem sobre a própria literatura de psicologia do esporte (30 meta-análises publicadas entre 1983 e 2021), então ele já cumpre o papel de contextualizar cada construto individual dentro do corpo de evidência mais amplo. Um ponto digno de nota: entre as 30 meta-análises incluídas está a de Hatzigeorgiadis et al. (2011) sobre self-talk, com o mesmo tamanho de efeito (d=0,48) que aparece na literatura sobre o tema de forma consistente.

Força da evidência (GRADE):

• Achado geral (constructos “positivos” de psicologia do esporte, como coesão, confiança, mindfulness, com efeito médio pequeno a moderado sobre desempenho, d=0,51): Moderada. Vem de síntese quantitativa real de 30 meta-análises, com teste formal de que qualidade metodológica não muda a direção do achado.
• Achados por construto específico (ex: mindfulness d=1,35, “quiet eye” d=0,84): Fraca. Muitos desses vêm de uma única meta-análise com número pequeno de estudos primários (ex: mindfulness baseado em só 3 estudos primários), intervalo de confiança largo, alto risco de superestimação por efeito de amostra pequena.
• Achado sobre construtos “negativos” (ansiedade, depressão, clima de ego, efeito médio pequeno, d=-0,21): Moderada, com a mesma ressalva de variação por construto.

Aplicação prática e validade externa: Amostra combinada extremamente heterogênea: de crianças a adultos, de recreativos a atletas olímpicos, mistura de desenhos correlacionais (14 meta-análises) e baseados em intervenção (13), em dezenas de esportes diferentes. Ponto forte real: sem restrição de idioma na busca (diferente da revisão de 2011 deste acervo), o que reduz, mas não elimina, o viés amostral em direção a populações ocidentais/WEIRD, já que os estudos primários dentro de cada meta-análise ainda tendem a ser predominantemente de países de língua inglesa. Ponto de aplicação prática interessante pra Athos: os autores citam um estudo online com mais de 44.000 participantes em que o treino ativo de habilidades psicológicas só superou marginalmente uma condição controle ativa (que também recebia encorajamento motivacional). Ou seja, parte do efeito de “treino psicológico” pode vir de expectativa, efeito placebo ou aliança com quem administra, não só do conteúdo específico da técnica. Vale considerar essa ressalva ao comunicar “psicologia esportiva funciona” pro público da Athos: funciona, mas o “porquê” pode ser mais sutil do que a técnica em si.