Anda di halaman 1dari 18

Psychological Bulletin © 2017 da Associação Americana de Psicologia

2017, Vol. 143, No. 7, 757-774 0033-2909 / 17 / $ 12.00 http://dx.doi.org/10.1037/bul0000074

COMENTE

Evidência exagerada de Curto Prazo Efeitos de jogos violentos no afeto


e Comportamento: Uma reanálise dos Anderson et al. (2010)

Joseph Hilgard Christopher R. Engelhardt


Universidade da Pensilvânia CARFAX, Inc., Columbia, Missouri

Jeffrey N. Rouder
Universidade de Missouri
Este documento é protegido pela American Psychological Association ou uma de suas editoras aliadas. Este artigo destina-se

videogames violentos são teorizou a ser uma importante causa de pensamentos agressivos, sentimentos e comportamentos. prova importante para essa

afirmação vem de uma grande meta-análise de Anderson e seus colegas (2010) , Que encontraram efeitos de jogos violentos em pesquisa experimental, em

corte transversal, e longitudinal. Nesse meta-análise, os autores argumentam que há pouca publicação ou viés analítico na literatura, um argumento apoiado

por seu uso do procedimento de guarnição e enchimento. No presente manuscrito, que reexaminar sua meta-análise utilizando uma ampla gama de técnicas

de detecção de polarização e ajustando os tamanhos de efeito. Nossas conclusões diferentes das de Anderson e seus colegas de 3 formas salientes.

Primeiro, nós detectar viés de publicação substancial em pesquisa experimental sobre os efeitos de jogos violentos a comportamento agressivo afetar e

agressivo. Em segundo lugar, após o ajuste para a polarização, os efeitos de jogos violentos a comportamento agressivo em pesquisa experimental são

estimados como sendo muito pequeno, e as estimativas dos efeitos sobre agressiva afetam são muito reduzidos. Em contraste, a literatura transversal

encontra correlações que aparecem em grande parte imparcial. Em terceiro lugar, as experiências com critérios dos autores originais de qualidade
exclusivamente para o uso pessoal do usuário individual e não deve ser amplamente divulgadas.

metodológica não produzem efeitos ajustados maiores do que outras experiências, mas em vez disso deu indicações maiores de viés, indicando que talvez

eles foram selecionados para significância. Nós delinear futuras direções para a pesquisa experimental forte. Os resultados indicam a necessidade de um

processo de investigação aberto, transparente e pré-registada para testar a existência do fenômeno básico. indicando que talvez eles foram selecionados

para significância. Nós delinear futuras direções para a pesquisa experimental forte. Os resultados indicam a necessidade de um processo de investigação

aberto, transparente e pré-registada para testar a existência do fenômeno básico. indicando que talvez eles foram selecionados para significância. Nós

delinear futuras direções para a pesquisa experimental forte. Os resultados indicam a necessidade de um processo de investigação aberto, transparente e

pré-registada para testar a existência do fenômeno básico.

Palavras-chave: jogos de vídeo violentos, meta-análise, p curva, metaregression, agressão

materiais suplementares: http://dx.doi.org/10.1037/bul0000074.supp

Os jogos de vídeo violentos fazer seus jogadores mais agressivo? Dada a essa ligação, tanto assim que as organizações profissionais emitiram declarações
popularidade continuada de jogos de vídeo violentos e sua crescente sofisticação políticas aviso dos efeitos nocivos dos meios violentos ( Força American
tecnológica, mesmo efeitos modestos de jogos violentos podem ter sérias Psychological Association Task na mídia violenta de 2015 ; Conselho de
implicações para a saúde pública. A pesquisa psicológica fornece aparentemente Comunicação e Mídia de 2009 ). Na visão dos grupos de trabalho profissionais de
forte evidência de analisar as provas e elaboração dessas declarações, a evidência é clara o suficiente,
e os perigos certo suficiente, que o público deve ser informado e educado sobre os
efeitos nocivos dos jogos de vídeo violentos. Como a Academia Americana de
Pediatria coloca, “a associação entre violência na mídia e comportamento agressivo
é [. . .] Quase tão forte quanto a associação entre tabagismo e câncer de pulmão”( Conselho
Joseph Hilgard, Annenberg Public Policy Center, University of Pennsylvania; Christopher
R. Engelhardt, CARFAX, Inc., Columbia, Missouri; Jeffrey N. Rouder, Departamento de de Comunicação e Mídia de 2009 , P. 1497). Apesar de décadas de pesquisa e
Ciências Psicológicas, da Universidade de Missouri. centenas de estudos, no entanto, os fenômenos básicos permanecem debatido. Para
os defensores, os efeitos são óbvios, robusto e quase onipresente. Para os céticos, a
Agradecemos a Craig A. Anderson por compartilhar conosco o conjunto de dados de Anderson pesquisa não é tão limpa, nem os efeitos tão óbvio como foi apresentado. Em vez
et al. (2010) e nos convidando para hospedá-lo publicamente no nosso repositório GitHub. disso, os céticos apontam para uma série de questões, incluindo a construção de
Agradecemos Randy McCarthy e Katie Corker para sugestões sobre um projecto deste artigo. validade, resultados nulos, e viés de publicação como a minar a evidência para
Joseph Hilgard é suportado pelo Drs. Gloria e Melvin “Jack” Chisum Bolsa de Investigação no
efeitos de jogo violento (ver, por exemplo, Elson & Ferguson, 2014 ).
Centro de Políticas Públicas Annenberg. Jeffrey N. Rouder é suportado pelo National Science
Foundation Subsídios BCS-1240359 e SES-102408.

Correspondência relativa ao presente artigo deve ser dirigida a Joseph Hilgard,


Annenberg Public Policy Center, University of Pennsylvania, 202 Sul, 36th Street,
Philadelpha, PA 19104-3806. O email: jhilgard @ gmail.com O argumento dos defensores é avançada por uma meta-análise de Anderson
et al. (2010) . Esta meta-análise abrange 381

757
758 Hilgard, ENGELHARDT, E ROUDER

estimativas dos efeitos baseado em 130,296 participantes. Os estudos referidos foram cada realizar simulações demonstrando melhores ajustes para esses artefatos potenciais
separados em “BestPractices” e “não-BestPractices” subconjuntos conforme se do que o método de guarnição e enchimento usados ​em
encontrou um conjunto de critérios de inclusão. Os autores enfatizam o subconjunto de Anderson et al. (2010) . Aplicação destas técnicas, então, pode produzir novos
melhores práticas, mas fornecer análises da amostra completa como uma análise de insights sobre a magnitude dos efeitos sobre certos resultados em certos
sensibilidade. Acham que em melhores práticas experimentos não são paradigmas.
estatisticamente e efeitos praticamente significativos de violência jogo de vídeo em
pensamentos agressivos ( r
Preocupações sobre Viés
. 22), sentimentos agressivos
(r . 29), e comportamentos agressivos ( r . 21). Além disso, estes Estávamos preocupados com três fontes potenciais de polarização no Anderson et al.
efeitos não estão limitados a experimentos mas também são encontrados em meta-análise. O primeiro, viés de publicação, é o fenómeno que estuda com
comparações transversais e mesmo em desenhos de pesquisa longitudinais. É estatisticamente significativa (por exemplo, p
claro, a qualidade de qualquer meta-análise pode ser comprometida pela . 05) resultados são mais propensos a ser submetido e aceito para publicação do que os
polarização da publicação. Para mitigar os efeitos de tais viés, Anderson et al. estudos com resultados não significativos. O segundo, p-hacking, é a possibilidade de que
aplicado o procedimento guarnição-and-fill ( Duval & Tweedie de 2000 ) Para pesquisadores aumentar as suas taxas de erro tipo 1 em uma tentativa de encontrar
detectar e ajustar para os efeitos de polarização publicação sobre as estimativas do resultados publicáveis, estatisticamente significativos. O último, viés de seleção, é a aplicação
tamanho do efeito. De acordo com Anderson et al., Os ajustamentos resultantes de flexibilidade nos critérios de inclusão de meta-análise. Nós discutimos cada um por vez.
Este documento é protegido pela American Psychological Association ou uma de suas editoras aliadas. Este artigo destina-se

foram mínimas, indicando que não houve viés grave entre os estudos. Com estas
salvaguardas, Anderson e colegas concluem que há forte evidência de efeitos
violenta-video-game; Bushman, Rothstein e Anderson (2010) e Huesmann (2010) chamar
a evidência neste corpus de estudos “decisivo”.
viés de publicação

viés de publicação é um problema que contribui para a sobreavaliação de


Apesar desta meta-análise, ainda há céticos de efeitos causais de jogos de vídeo tamanhos de efeito e a propagação de erro de Tipo 1. Quando os estudos que
violentos sobre os resultados agressivos. Ferguson e Kilburn (2010) , Por exemplo, estão atingem significância estatística são mais propensos a serem publicados do que
exclusivamente para o uso pessoal do usuário individual e não deve ser amplamente divulgadas.

em causa que o Anderson et al. (2010) meta-análise pode sofrer de viés na publicação de aqueles que não são, meta-análises da literatura publicada não são mais
estudos, a entrada de tamanhos de efeito em meta-análise, e a aplicação dos critérios de representativo do corpo cheio de pesquisa. Note-se que o viés de publicação é
inclusão melhores práticas. Outros céticos, como Elson, Mohseni, Breuer, Scharkow, e proporcionada, não absoluta. A presença de alguns resultados nulos publicadas,
Quandt (2014) , Também estão preocupados que os estudos individuais sofrem de práticas portanto, não exclui a possibilidade de qualquer viés de publicação. Note
de investigação questionáveis, tais como o relatório selectiva de variáveis ​dependentes que também que o viés pode ser infligida tanto a nível de revistas, que podem rejeitar
produzem significância estatística. Os céticos suspeitam que esses vieses meta-analíticos e resultados nulos e autores, que não pode incomodar a apresentação de
práticas de pesquisa questionáveis ​pode superestimar a força da evidência para, ea resultados nulos. As meta-análises de literaturas que sofrem de viés de
magnitude dos, efeitos de jogos de vídeo violentos, apesar dos resultados das análises publicação são susceptíveis de sobrestimar tamanhos de efeito e pode chegar a
guarnição e enchimento. conclusões incorrectas de estatisticamente significativos e efeitos praticamente. Anderson
et al. (2010) . Aqui há desacordo. Anderson et al. afirmam que há pouca
evidência de viés de publicação. Sua reivindicação segue das suas tentativas de
Para lidar com esse ceticismo contínuo, nós reanalisar o banco de dados criado e conta para tal polarização usando ambos os métodos estatísticos e revisão da
utilizado por Anderson et al. (2010) . Nós sentimos que este reanálise é necessária por literatura.
várias razões: Primeiro, o tema é importante e controverso. Efeitos de videogames
violentos são muito debatido e ter implicações para a saúde pública e para a liberdade
de expressão iguais. Em segundo lugar, a avaliação da literatura jogo violento-video
tem ramificações teóricas importantes. A principal explicação para estes efeitos, Com relação aos métodos estatísticos, os autores utilizaram um procedimento
Anderson e Modelo Agressão Geral de Bushman (GAM; Anderson & Bushman de 2002 ) guarnição-andfill para estimar as estimativas de tamanho de efeito ajustada ao viés. Este
É um modelo convencional socialpsychological ativação em que jogos violentos procedimento recomendado apenas um pequeno ajuste, sugerindo assim um grau mínimo
aumentar a excitação, causar agressiva afetam e pensamentos agressivos principais, de viés de publicação. Esta reivindicação tem dois pontos fracos. Primeiro, embora
que, por sua vez, causar um comportamento agressivo. efeitos de jogos de vídeo guarnição-and-fill era bastante popular na época do Anderson et al. análise, hoje
violentos, portanto, são antecipados por mecanismos teóricos populares em psicologia entendemos trimand-fill para ser pelo menos um pouco falho. Ele corrige o viés quando
social. Em terceiro lugar, o Anderson et al. (2010) meta-análise é um volume enorme de viés está ausente e não corrige o suficiente quando viés é forte ( Simonsohn et al., 2014b ; van
trabalho que engloba muitos estudos. Fomos atraídos para a qualidade e quantidade Assen et al., 2015 ). Ele também tem dificuldade em adaptar tamanhos de efeito a zero
dos dados, bem como o seu impacto considerável sobre a teoria, prática e política. Em quando o nulo é verdadeira e não há tendência publicação ( Moreno et al., 2009 ; van
quarto lugar, existem promissoras novas técnicas para lidar com viés de publicação Assen et al., 2015 ).
potencial e práticas de pesquisa questionáveis. Estas novas técnicas incluem PET
(Precision-Efeito de teste; Stanley & Doucouliagos de 2014 ), PEESE (Precision-Efeito
Estimado com o erro padrão; Stanley & Doucouliagos de 2014 ), p curva ( Simonsohn, Com relação à revisão da literatura, os autores fizeram uma tentativa de coletar
Nelson, & Simmons, 2014A , 2014b ), E p uniforme ( van Assen, van Aert, & Wicherts de literatura inédito. Os autores encontraram 18 dissertações que tinham ido inéditos, 16
2015 ). Os artigos que introduzem estes técnicas dos quais não conseguiram encontrar significância estatística em um ou mais
resultados. Apenas um estudo nondissertation inédito foi encontrado. Dada a
dificuldade de reunir os resultados não publicados, nós suspeitamos que pode haver
estudos nondissertation mais inéditas que ainda não estão incluídos na análise.
EFEITOS superestimada de jogos violentos 759

Nesta base, a consideração mais pormenorizada da possibilidade de polarização no corpus de dissertações não publicados em revistas e consideradas como as suas
Anderson et al. dataset meta-analítica é justificada. estimativas diferia de outras pesquisas coletadas.

p Hacking Procedimentos estatísticos

Como os resultados estatisticamente significativos são mais fáceis de publicar, particularmente Um tema comum em muitos testes estatísticos para polarização metanalítica é a relação
em revistas de prestígio, os pesquisadores muitas vezes se esforçam para significância estatística. entre os tamanhos do efeito e os seus erros padrões (Ses) em estudos relatados. Numa
Muitas vezes, este esforço leva à significância estatística desejada, mas também faz com que uma literatura de investigação imparcial, não deve haver qualquer relação entre os tamanhos do
taxa de erro inflado Tipo 1; o resultado obtido é mais provável que seja um falso positivo. Práticas efeito e SE (ou o tamanho das amostras); tamanho da amostra não faz com que o tamanho
que levam a essa inflação de Tipo 1 de erro incluem paragem dependente de dados (isto é, tomar a do efeito. No entanto, uma tal relação será observado se publicação favorece estudos
decisão de terminar a recolha de dados quando p estatisticamente significativas à custa de estudos não significativas. estudos Smallsample
. 05 ou precisam de grandes tamanhos efeito observado atingiu significância estatística, enquanto
continuar quando p . 05), a inclusão ou exclusão de estratégica que estudos de grande amostra pode alcançar significância estatística com menores
valores aberrantes dependendo da sua influência sobre os resultados, ou a análise de tamanhos de efeito observados. Assim, na presença de viés de publicação, não existe um efeito
subgrupos em que a análise da amostra total não é possível detectar um efeito. Outra pequeno-estudo: uma relação inversa entre o tamanho do efeito e tamanho da amostra.
forma de p hacking é resultado de comutação: Se desfecho primário de um experimento Aplicamos alguns métodos contemporâneos para detectar efeitos smallstudy que, à medida
Este documento é protegido pela American Psychological Association ou uma de suas editoras aliadas. Este artigo destina-se

não encontrar o resultado desejado, outros resultados com mudanças mais que vai documentar, indicam viés substancial no Anderson et al. meta-análise. Uma questão
estatisticamente significativa pode ser apresentado em vez eo resultado primário oculto crítica na meta-análise é a questão do que pode ser aprendido na presença de viés. A
de relatório. Tem sido argumentado que tal resultado de comutação podem existir na posição mais caridosa é que os pesquisadores possam avaliar o grau de polarização e
quantificação e relatório de certas medidas de comportamento agressivo. Alguns fornecer correções necessário para recuperar as estimativas de tamanho de efeito precisas
pesquisadores medir o comportamento agressivo, permitindo que os participantes a (por exemplo, Duval & Tweedie de 2000 ; Simonsohn et al., 2014b ). Estamos a menos
administrar uma explosão dolorosa de ruído para outro participante (o competidor tempo sanguíneo, tanto quanto se sabe sobre as propriedades estatísticas de correcções a sua
de reação de tarefas). Tanto o volume e a duração de uma tal rajada de ruído são eficiência e viés em amostras realisticamente tamanho, bem como a sua robustez a violação
medidos. Existe uma diversidade considerável na maneira estudos combinaram essas das suposições. Ainda assim, eles têm algum valor em análise. Nós fornecemos uma revisão
exclusivamente para o uso pessoal do usuário individual e não deve ser amplamente divulgadas.

quantidades, e Elson et al. (2014) sugerem que essa diversidade reflete o fato de que dos métodos de viés de detecção e de correção utilizados neste estudo, observando os
alguns estudos encontrar significância estatística sob uma combinação enquanto outros pontos fortes e fracos de cada um.
estudos encontrar significado em uma combinação diferente. Em geral, quando os
pesquisadores coletam várias medidas dependentes, existe a possibilidade de que haja
alguma seleção estratégica entre eles. Tal selecção dos resultados maiores, mais
estatisticamente significativos riscos sobreavaliação do tamanho líquido efeito.
parcelas funil. parcelas funil fornecer um resumo gráfico útil de potenciais efeitos de
pequeno estudo na meta-análise. A relação entre os tamanhos do efeito e SE s é plotado,
permitindo a estimativa visual de efeitos de pequeno estudo. Em um gráfico de funil, tamanho
do efeito é traçado no X- eixo e precisão (isto é, o inverso da SE) no y- eixo. Na ausência de
efeitos pequena de estudo e heterogeneidade, os resultados do estudo irá formar uma forma
de funil simétrico, exibindo variação substancial no momento da amostragem de erro é
Viés de seleção
grande, mas estreitando para uma estimativa precisa no momento da amostragem de erro é
viés de seleção pode contaminar meta-análise, quando os pesquisadores incluir ou pequena. Devido a este erro de amostragem, é esperado que alguns estudos em pequena
excluir estudos sobre a base da hipótese são favoráveis. Para seu crédito, Anderson et al. amostra para encontrar resultados nulos ou mesmo negativos, mesmo quando o efeito
definir um conjunto de critérios de inclusão “melhores práticas”. Estudos que satisfazem subjacente é positivo, desde que não existe nenhum desvio. Tal simetria não é encontrado
estes critérios são discutidos para fornecer melhores estimativas através de maior qualidade em parcelas de funil de pesquisa contaminados com viés de publicação ou p hacking. No caso
metodológica, dizem, por operacionalização adequada da variável independente, ou por de viés de publicação, estudos estão em falta a partir da porção inferior do funil, onde
uma escolha apropriada do desfecho ( Anderson et al., 2010 , Mesa 2). Contudo, Ferguson e resultados não seria suficiente para alcançar significância estatística ou sequer sugerem um
Kilburn (2010) teve problema com Anderson et al. melhores critérios práticas. Estes críticos efeito de sinal contrário. Esta assimetria também pode ser causada por p hacking. Quando as
argumentaram que os critérios de inclusão foram aplicados mais liberalmente para estudos amostras são recolhidas até que um desejado p valor é atingido, estudos publicados vai
com resultados significativos do que para os estudos com resultados não significativos, aumentar tanto em tamanho precisão e efeito, movendo-se em direção à borda superior
desse modo, aumentar artificialmente a evidência para, e tamanho de, o efeito. Dada a direito do funil. Quando subgrupos ou subgrupos experimentais são censurados para
controvérsia, vamos prestar muita atenção à forma como os resultados variam com e sem destacar apenas uma subgrupo em que a significância estatística foi encontrada, estudos irá
estes critérios de melhores práticas. perder precisão e aumentar em tamanho do efeito, movendo-se para a aresta inferior direito
do funil. Quando os resultados são censuradas para destacar apenas os resultados
significativos, o aumento do tamanho de efeito, movendo-se estudos para a direita do funil.

Avaliando Viés em Meta-Analysis

Existem várias abordagens para avaliar os preconceitos acima mencionados na


meta-análise. Alguns destes são desenvolvimentos recentes publicados somente após
a publicação da Anderson et al. (2010) . Utilizou-se estes testes e métodos para fornecer teste de regressão de Egger. teste de regressão ponderada de Egger ( Egger,
uma análise mais aprofundada de Anderson et al. meta-análise. Além disso, olhamos Smith, Schneider, & Minder de 1997 ) Inspecciona o grau e a significância
para o estatística da relação entre SE areia
760 Hilgard, ENGELHARDT, E ROUDER

tamanhos de efeito. Um teste estatístico significativo sugere que a trama funil observada relação linear entre o tamanho da amostra e precisão. Assim, o PET tem um bom
seria excepcionalmente assimétrica se a literatura recolhidos foram imparcial. Este teste é, desempenho em efeitos estimar quando o efeito subjacente é aproximadamente zero. No
por vezes, útil para reduzir a subjetividade na inspecionar visualmente um lote de funil para entanto, o PET tem um desempenho menos bem quando existe algum efeito. Quando
assimetria. teste de regressão de Egger tem alguns pontos fracos. Embora possa detectar existe um efeito subjacente, pequenos estudos serão censurados fortemente pelo viés de
viés, que não fornece um efeito de tamanho ajustada ao viés. O teste é também conhecido publicação, mas a maioria das grandes estudos irá encontrar a significância estatística e
por ter poder estatístico pobre quando polarização é moderada ou estudos são poucos, o ser afectada por polarização. PET vai deixar de modelar essa nuance e corre o risco de
que limita a força das conclusões que podem ser retiradas por meio da aplicação do teste ( Sterne, subestimar o tamanho dos efeitos diferentes de zero ( Stanley & Doucouliagos de 2014 ).
Gavaghan, & Egger de 2000 ). O desempenho é também susceptível de degradar sob as Um segundo estimador metaregression, PEESE, se destina a resolver este problema.
condições de heterogeneidade (por exemplo, Lau et al., 2006 ; Terrin et al., 2003 ). Cépticos PEESE encaixa um ponderada quadrático relação entre os tamanhos do efeito e SE s. A
utilizado o teste de Egger para procurar evidência de viés na literatura-violentgame efeito motivação para o termo quadrático é como se segue: Assumindo que existe algum efeito
(por exemplo, Ferguson de 2007 ; Ferguson & Kilburn de 2009 ), mas Anderson et al. (2010) absteve-se
real, e que o preconceito publicação favorece resultados estatisticamente significativos e
de seu uso. mal alimentado, estudos de baixa precisão será publishable apenas quando mal
sobrestimar o tamanho verdadeiro efeito. Em contraste, bem alimentado, estudos de alta
precisão, rotineiramente obter resultados significativos e, portanto, ser publicável sem
Aparar e preencher. Uma técnica viés de ajuste popular, cortar e encher ( Duval & superestimar o tamanho verdadeiro efeito. Assim, há mais de polarização entre os estudos
Tweedie de 2000 ), É utilizado para detectar e ajustar a polarização através da inspecção de baixa precisão do que há entre os estudos de alta precisão; o termo quadrático permite
Este documento é protegido pela American Psychological Association ou uma de suas editoras aliadas. Este artigo destina-se

do número de estudos com estimativas do tamanho do efeito extremos de ambos os


essa distinção. Na prática, PEESE é menos provável do que o PET a subestimar efeitos
lados da estimativa média metanalítica. Se a trama funil é assimétrico, O processo de
diferentes de zero, mas é tendenciosa para cima quando o nulo é verdadeira ( Stanley &
“guarnições” off o estudo mais extrema e imputa um estudo censurado hipotético
Doucouliagos de 2014 ). Porque PET subestima efeitos diferentes de zero e PEESE
reflectido em torno do eixo da trama funil de simetria (por exemplo, um estudo imputada
sobrestima efeitos nulos, por vezes, de PET e PEESE são combinados como um
com um tamanho estimativa efeito muito mais pequeno ou mesmo negativo). Estudos
procedimento de PET-PEESE condicional de dois passos. Se o PET detecta um efeito
são aparadas e preenchido desta maneira até que as fileiras dos valores absolutos dos
significativo, a estimativa PEESE é utilizado; Se o PET não detectar um efeito significativo,
tamanhos de efeito observados em cada lado do tamanho médio do efeito são
a estimativa de PET é usado. Embora essa abordagem parece fazer uso de forças e
aproximadamente iguais. Apare-and-fill tem seus críticos. Moreno et al. (2009) , Simonsohn
fraquezas complementares dos estimadores, esta abordagem pode ser extremamente
exclusivamente para o uso pessoal do usuário individual e não deve ser amplamente divulgadas.

et al. (2014b) e van Assen et al. (2015) argumentam que não é útil: quando não há
conservador, como PET tem poder estatístico questionável para a detecção de efeitos ( Gervais
preconceito, há muito ajuste, e quando há uma forte tendência, há muito pouco ajuste. Higgins
de 2015 ). Quando a alimentação de PET é pobre, condicional PET-PEESE tende a
e Green (2011) expressar preocupação com a imputação de estudos, que adiciona
subestimar efeitos, uma vez que apenas o PET é sempre aplicado. Por esta razão, nós
dados puramente hipotética do meta-análise.
relatamos PET e PEESE. Quando a estimativa PET é significativo, a estimativa PEESE
pode ser favorecido, mas quando não é significativa, não se deve necessariamente
favorecer PET sobre PEESE, pois os resultados não significativos não garantem a
verdade da hipótese nula. Um exemplo recente da utilização rentável dessas técnicas
Por estas razões, a guarnição e enchimento é mais comumente sugerida como uma forma
metaregression é uma meta-análise de Carter e McCullough (2014) . Estes autores
de análise de sensibilidade ao invés de uma estimativa grave do tamanho do efeito imparcial.
testaram a evidência para “esgotamento ego,” o fenômeno de fadiga em auto-controle.
Quando a estimativa meta-analítica ingênua e a estimativa guarnição-and-fill-ajustados
Eles descobriram que, após ajuste para efeitos de pequeno estudo, PET-PEESE sugeriu
diferem apenas ligeiramente, sugere-se que a pesquisa é em grande parte imparcial; quando
uma ausência de evidência para o fenômeno. Portanto, os autores recomendaram um
a diferença é grande, ele sugere viés de pesquisa potencial. Anderson et al. (2010)
esforço replicação preregistered-grande amostra, que não encontrou nenhuma evidência
de esgotamento ego ( Hagger et al., No prelo ).
aplicado o procedimento guarnição e enchimento em sua meta-análise. O procedimento rendeu
ajustado apenas ligeiramente tamanhos de efeito, e por isso os autores concluíram viés de
pesquisa mínimo. Mais uma vez, o desenvolvimento de novos ajustamentos para efeitos de
estudo em pequena permite para mais testes de esta conclusão.

PET e metaregression PEESE. Metaregression é uma ferramenta nova e


promissora na detecção de polarização e de ajuste. Metaregression estima um tamanho
ajustado efeito de polarização, considerando a relação entre os tamanhos do efeito e SE s,
em seguida, estimar o tamanho do efeito subjacente hipotética que seria encontrado se
o SE eram zero. Dois estimadores metaregression são o teste de precisão-Efeito (PET) p curva. Outra nova técnica para contabilização de efeitos smallstudy é p curva ( Simonsohn
e de precisão-Efeito Estimado com o erro padrão (PEESE; Stanley & Doucouliagos de et ai., 2014A , 2014b ), Que estima o tamanho do efeito subjacente, inspeccionando

2014 ). Em PET, um ponderadas linear regressão está apto para descrever a relação a distribuição de significativa p valores. Quando a hipótese nula é verdadeira (ie,

entre os tamanhos do efeito e SE s, como no teste de regressão Egger. Ao contrário do


teste de Egger, que considera a inclinação desta regressão, PET considera a 0), o p curva é plana: significativa p Os valores são tão susceptíveis de ser inferior a 0,01

intercepção desta regressão. Isso extrapola a partir dos dados disponíveis para estimar como eles são entre 0,04 e 0,05. Quando a hipótese nula for falsa, o p curva torna-se

qual seria o efeito em um estudo hipotético com perfeita precisão. Quando há o mínimo direito-enviesada de tal modo que p valores inferiores a 0,01 são mais comuns que são p valores

de polarização, não há ajustamento mínimo. Quando não há nenhum efeito subjacente, entre 0,04 e 0,05. O grau de inclinação para a direita é proporcional à potência de estudos

estudos publicados tendem a deitar-se no limite entre a significância estatística e para detectar um efeito; amostras maiores ou efeitos vai produzir maiores graus de inclinação

nonsignificance, formando um para a direita. Ao considerar o p valores e tamanhos de amostra de estudos significativos, p curva
pode ser usado para gerar uma estimativa de probabilidade máxima do tamanho médio do
efeito população.
EFEITOS superestimada de jogos violentos 761

p curva também tem a fraqueza que ele pode retornar estimativas enviesadas quando os 2008 ), Conclusões de meta-analítica devem ser interpretados com o entendimento de que
estudos individuais são p hackeado. Simonsohn et al. (2014b) existem ainda as-fatores desconhecidos que causam o tamanho do efeito população a ser
advertem que p hacking é susceptível de causar p curva subestimar o tamanho do efeito, maior ou menor de estudo para estudo. Às vezes, a heterogeneidade pode causar uma
mas Van Aert et al. (In press) advertem que, sob certas condições, p pirataria pode causar p curvacorrelação entre tamanhos de efeito e SE s que não é causada por polarização. Por exemplo,
a sobrestimar o tamanho médio do efeito população. estudos experimentais tendem a ter amostras mais pequenas do que os estudos de corte
transversal, e cada paradigma podem reflectir diferentes tamanhos de efeito subjacentes.
p uniforme. p uniforme é outro teste baseado na potência e ajustamento para a Neste caso, o tamanho da amostra estaria relacionada com efeito de tamanho, mas apenas
polarização ( Van Assen et al., 2015 ). Gostar p curva, ele considera somente os resultados através da variável de confusão do desenho do estudo. É desejável a excluir esse confunde
estatisticamente significativos na meta-análise. Ele tenta encontrar um tamanho de efeito potenciais para que os efeitos de pequeno estudo mais provável representar o papel de
subjacente para o qual o condicional p distribuição valor seria tão perto quanto possível viés. Por exemplo, a realização de ensaios de polarização separadas para estudos
uniforme. Ou seja, ele procura um tamanho de efeito 0 para o qual a hipótese nula H 0: 0 geraria transversais e experimentais pode descartar desenho do estudo como uma causa potencial
uma distribuição aproximadamente uniforme de p de efeitos de pequena estudo. Heterogeneidade é particularmente preocupante no presente
relatório, como a maioria dos métodos viés de ajuste que aplicamos assumir a
valores. Ele também fornece um teste para a polarização publicação, verificando se o tamanho do homogeneidade, e todos terão dificuldade em face da heterogeneidade substancial. Sob
efeito ajustado é estatisticamente significativamente menor do que a estimativa metanalítica condições de heterogeneidade, Lau, Ioannidis, Terrin, Schmid, e Olkin de 2006 ; Terrin,
ingénuos. Gostar p curva, ele considera somente os estudos com p Schmid, Lau, e Olkin de 2003 ). Variabilidade entre os estudos pode causar alguns estudos
Este documento é protegido pela American Psychological Association ou uma de suas editoras aliadas. Este artigo destina-se

. 05, e por isso pode perder informa- substancial precisamente estima-se que as estimativas de tamanho efeito muito longe da média geral,
ção. levando a tipo 1 ou tipo 2 erros em testes de viés. Assim, o desempenho dos testes
baseados no funil-trama e ajustamentos, tais como o teste de Egger, procedimento
cortar-e-enchimento, e de PET e metaregression PEESE irá degradar-se na presença de
Dissertações não publicadas
heterogeneidade. A heterogeneidade pode também influenciar a potência com base (isto é, p curva,
No entanto, outra abordagem é evitar ajustes estatísticos e tentar inspecionar a
literatura não publicada diretamente. Quando o trabalho não publicado fornece estimativas
de tamanho do efeito menor do que o trabalho publicado, publicação polarização pode estar
exclusivamente para o uso pessoal do usuário individual e não deve ser amplamente divulgadas.

presente. Infelizmente, os resultados não significativos pode ser difícil de recuperar para
meta-análise, já que muitas vezes ir inédito e esquecido.
p uniformes) Ajustes de meta-análise. Estas técnicas considerar apenas os resultados
No entanto, um formato de publicação é em grande parte imune a essas pressões estatisticamente significativos, e estudos com maiores tamanhos de efeito subjacentes são
publicação: a tese de doutorado. requisitos de departamento geralmente ditam que mais propensos a alcançar significância estatística. Isso pode causar p e curva p uniforme
dissertações ser apresentada e publicada numa base de dados dissertação para estimar um tamanho maior do que o efeito faz meta-análise naïve, como a análise
independentemente de haver ou não a tese é posteriormente publicado como um artigo naïve considera todos os estudos, enquanto p e curva p uniforme considerar apenas os
de jornal peer-reviewed. Outra vantagem de dissertações é que eles são tipicamente estudos estatisticamente significativos. Van Aert, Wicherts, e Van Assen (in press) advertem
completa, relatando todos os resultados e manipulações, enquanto artigos publicados que isso vai levar a superestimação dos tamanhos de efeito sob moderada a grande
em vez disso pode destacar apenas os resultados significativos ( O'Boyle, Banks, & heterogeneidade. Anderson et al. notado heterogeneidade em vários subconjuntos em sua
Gonzalez-Mule, 2014 ). Dissertações, em seguida, nos fornecer uma amostra de estudos meta-análise. Eles tentaram resolver essa heterogeneidade, procurando por moderadores,
relatados relativamente não contaminados por polarizações publicação, favorecendo e descobriu que nenhum de seus candidatos hipotéticos, como idade participante ou
resultados significativos. Em nossas análises, examinamos essas teses inéditas e a oriental versus cultura ocidental, foi responsável por essa heterogeneidade. Em nossas
significância estatística dos seus resultados. análises, olhamos para ver o quanto a heterogeneidade pode ser resolvido como efeitos de
pequeno estudo e cautela ao leitor quando os tamanhos de efeito ajustado pode ser
influenciado pela heterogeneidade residual. Para prenunciam, embora heterogeneidade
residual foi detectada por alguns subconjuntos, tratamento SE s como covariável reduzida
grandemente heterogeneidade residual, e, num caso, os resíduos resultantes foram tão
Heterogeneidade
homogénea quanto a sugerir contaminação grave por polarização (ver Ioannidis, Trikalinos,
Uma questão crítica na meta-análise é se os tamanhos de efeito reunidos de estudos & Zintzaras de 2006 ).
individuais parecem representar um único tamanho do efeito subjacente. Muitas vezes, os
tamanhos do efeito variar mais de erro de amostragem sozinho poderia prever, indicando
que o efeito é, por vezes, maiores ou menores de estudo para estudo. Esta variação é
chamado de heterogeneidade. Às vezes, essa heterogeneidade indica que os estudos são
muito desiguais para ser combinados e deve preferivelmente ser considerados
separadamente; por exemplo, a pesquisa de corte transversal e experimental podem reflectir
Resumo de métodos
fenómenos diferentes e não deve ser combinado. Em outras vezes, a heterogeneidade nos
tamanhos efeito pode ser previsto, como uma função de alguns moderador através Dado este estado do campo, a nossa análise será composto de duas questões principais.
metaregression. Por exemplo, um efeito pode ser maior entre homens do que entre as Em primeiro lugar, há evidências de efeitos de pequeno estudo no conjunto de dados? A
mulheres. Tais achados metaregression são úteis para que eles fornecem novas presença ou ausência destes efeitos serão avaliadas informalmente por inspecção das parcelas
descobertas e reduzir a quantidade de heterogeneidade residual. Finalmente, às vezes do funil e mais formalmente pelo teste Egger e p teste de polarização uniforme. Em segundo
heterogeneidade está presente e não pode ser atribuído a qualquer moderador. Nesta lugar, o que poderia ser estimativas ajustadas ao viés apropriadas? Vamos aplicar PET,
situação lamentável, mas comum ( Higgins, PEESE, p curva, e p uniforme para estimar o tamanho do efeito corrigido-polarização. A resposta
a esta segunda questão é necessariamente provisória
762 Hilgard, ENGELHARDT, E ROUDER

porque as propriedades estatísticas de esses ajustes só são grosseiramente n 2 1 r 2, em seguida, utilizada a t- valor a
lada t- valores pela equação r
conhecido. Vamos considerar se existem diferenças entre os resultados dos artigos
calcular um bicaudal p valor. Não relatar um p tabela de divulgação valor como
publicados e dissertações não publicadas que possam sugerir viés. Finalmente, vamos
recomendado pelo Simonsohn et al. (2014A) , Como o meta-análise p Os valores são uma
considerar o grau de heterogeneidade de estudos como os métodos acima pode em
função dos dados tal como introduzido por Anderson et ai. e não uma entrada directa de p valores
alguns casos ser degradada pela heterogeneidade.
frommanuscripts. Note-se que o p valores que entram assim corresponder ao efeito
principal de exposição violento jogo de vídeo como entrou por Anderson et ai. e não os
testes de hipóteses específicas conduzidas ou relatado por autores originais dos estudos.
Método

Realizamos uma reanálise da Anderson et al. (2010) meta-análise, utilizando os dados


fornecidos pelo primeiro autor do estudo. Nós aumentar a abordagem da guarnição e
enchimento com parcelas funil, PET e metaregression PEESE, p curva, e p analisa uniforme.
estimativas ajustadas
Usamos separação dos estudos dos autores originais pelo desenho do estudo (experimental,
transversal e longitudinal), pelo resultado do estudo (afeto, comportamento, cognição e O PET foi realizada por ajustamento de um modelo de regressão de mínimos quadrados

excitação) e pela qualidade do estudo (todos os estudos, melhores práticas subconjunto) em ponderados prever o tamanho do efeito como uma função linear da SE com pesos inversamente

nossa apresentação. Assim, as correlações pointbiserial de experiências e correlações proporcional ao quadrado do SE. PEESE também foi realizada, prevendo o tamanho do efeito como
Este documento é protegido pela American Psychological Association ou uma de suas editoras aliadas. Este artigo destina-se

produto-momento de secções transversais são tratados separadamente, como é geralmente uma função quadrática do
preferido. Por fim, realizamos 2 testes para ver se dissertações não publicados são mais ou SE e o uso de pesos semelhantes. Egger testa, PET, e PEESE foram realizadas utilizando o
menos susceptíveis de produzir significância estatística do que outros trabalhos publicados. pacote para metafor R ( Viechtbauer de 2010 ), Usando o RMA () função para ajustar um
No conjunto de dados original, Anderson et al. (2010) codificada todos os tamanhos de efeito modelo de efeitos aleatórios ponderada com um termo de erro aditivo. 2 Os modelos foram
em termos de Pearson r, então convertido estes para Fisher montados através de estimativa de probabilidade máxima restrita (REML), por padrões de
pacotes. Os tamanhos de efeito são convertidos a partir de Fisher z a Pearson r para tabelas
e discussão. Para p curva, foi utilizado o código R trás a versão 3.0 do on-line
exclusivamente para o uso pessoal do usuário individual e não deve ser amplamente divulgadas.

1
z- pontuações com SE igual a
N 3. 1 Esta abordagem é adequada
dado que a maioria das medidas de resultados são contínuos ou, pelo menos, modelado como
p curva de aplicação ( Simonsohn et ai., 2014A ), Entrando numa t valor e graus de
contínua por autores do estudo. Nós usamos a sua estimativa
parâmetro liberdade para cada estudo relevante. Este código fornece estimativas em
z- pontuações e SE s nesta análise. Esta abordagem tem a vantagem de fornecer SE s que não
termos de Cohen d. Nós convertido estes a Pearson r para a consistência de apresentação,
são uma função do tamanho do efeito. SE s que são uma função dos seus tamanhos efeito
usando a fórmula r
correspondente pode conduzir à detecção de efeitos espúrios de pequena estudo. dd 2 4. Cheio p saída de curva da linha p aplicação curve.com está disponível nos
materiais suplementares para p uniforme, usamos o p pacote uniforme fornecida por
Nossa inspeção concentra-se nos tamanhos de efeito matérias contidas nesse relatório. van Aert em https://github.com/RobbievanAert/puniform . A análise foi realizada
Anderson e colaboradores relataram coeficientes de correlação parciais de estudos utilizando as correlações e tamanhos de amostra tal como introduzido por Anderson
transversais que são ajustadas para o sexo dos participantes ( k et ai. o método padrão do pacote para a agregação de p foi utilizado valores.
9, 36, e 21 para afectar, de comportamento, e cognição,
respectivamente). Nós abster-se de análise destes, como reanálise das tamanhos parciais
efeito é susceptível de ser um desafio, porque as particularidades de correlações parciais
(ver, por exemplo, Aloe de 2014 ). Todos os dados e código foram disponibilizados on-line PET, PEESE, e p curva tendem a executar mal quando há poucos pontos de dados.
em https: // github Portanto, as nossas análises estão restritos a efeitos e paradigmas experimentais com,
. com / Joe-Hilgard / Anderson-meta . pelo menos, 10 tamanhos de efeito independentes. Os leitores que querem gerar
estimativas para os conjuntos de dados mais esparsos ou explorar o impacto de nossas
decisões de inclusão e exclusão são convidados a baixar os dados e código.
Agregação Dentro de Estudos

À medida que aplicá-los, os procedimentos de meta-analítica assumir que estudos Análise sensitiva. Além de nossa análise do total
inteiras são censurados ou reanalisados ​por sua significância estatística. No entanto, os conjunto de dados, tal como previsto por Anderson e colegas, realizamos análises de
dados originais têm alguns estudos divididos em subconjuntos para testar moderadores. Por
sensibilidade leave-one-out, removendo cada datapoint um de cada vez e fazer todas as
exemplo, um estudo pode ser inserido como dois registros: um para o efeito simples entre
estimativas ajustadas. O suplemento contém uma planilha que lista os estudos
os homens, e outra para o efeito simples entre as mulheres. Onde foram inseridos múltiplos
individuais e as estimativas quando eles são excluídos.
efeitos para um único estudo, agregados estes para formar uma única estimativa do
tamanho do efeito somando os tamanhos de amostra e fazendo uma média ponderada dos
tamanhos de efeito subamostra. Isso se compara o comportamento do software utilizado na
1 Como revisor assinala, esta aproximação é tecnicamente correto apenas quando o tamanho do efeito
análise original.
é zero; medida que o tamanho aumenta efeito, o SE torna-se menor do que
1
N 3. Ainda assim, nós preferimos este estimador porque elimina um
correlação entre o tamanho do efeito inerente e SE, evitando assim o potencial de polarização em testes
Cálculo de p valores metaregression. Além disso, a aproximação é boa quando os efeitos não são muito grandes, como aqui.
Veja, por exemplo, Borenstein (2009) , P.
Embora a entrada de dados original realizada por Anderson e seus colegas é
234.
admiravelmente completo, o conjunto de dados que nos foi dada não tem as estatísticas 2 Nós também se encaixam modelos de efeitos fixos com um termo de erro multiplicativo. Veja o suplemento.

necessárias para p curva de meta-análise. Nós calcu-


EFEITOS superestimada de jogos violentos 763

estudos Excluídos Resultados

Nós removemos dois estudos do banco de dados meta-analítica por causa de O conjunto de dados para análise foi composto pelos seguintes subgrupos: (a) os efeitos
preocupações sobre a relevância. Panee e Ballard (2002) foi removido porque o estudo experimentais de exposição violenta do jogo no agressiva afetar. Em uma análise, foram
testou os efeitos de um nível de formação violenta ou não violenta em dois resultados: a incluídos todos os estudos ( k 34, N
auto-relatados afetam e comportamentos agressivos dentro de um videogame violento. 2879), foram incluídos noutro única Anderson et al. Estudos melhores práticas ( k
Todos os participantes jogaram o mesmo jogo violento; portanto, ele não fornece um
18, N 1318); (B) efeito de Experimental
teste relevante da hipótese. Graybill, Kirsch, e Esselman (1985) foi também removido a
exposição violenta do jogo sobre o comportamento agressivo (todos os estudos, k 39,
partir da análise, como este estudo não medido a quantidade de cognição agressiva, mas
N 3.328; melhores práticas, k 23, N 2413); (C) Experimental
a direcção e o tipo do mesmo. Porque cada sujeito foi categorizado num direccional e
efeitos da exposição violenta do jogo em cognições agressivos (todos os estudos, k 40, N 4.074;
uma categoria tipológica, os resultados não estimar diferenças na quantidade de
melhores práticas, k 24, N 2887); e (d) Efeito de exposição experimental violenta-jogo na
cognição agressivo. Como introduzido no Anderson et al. conjunto de dados, verificações
excitação fisiológica (todos os estudos, k 24, N 1.770; melhores práticas, k 11, N
de manipulação do estudo também foram inseridos como se fossem os resultados
primários do estudo sobre cognições agressivos. Nenhuma destas são testes de
hipóteses relevantes. 3 833). Além disso, houve estudos suficientes para reanalisar as correlações entre o jogo
violento e agressivo afetam (todos os estudos, k 14, N 9811; melhores práticas, k 7, N 4.348,
muito poucos para reanalisar), comportamento (todos os estudos, k 37, N 29113; melhores
Este documento é protegido pela American Psychological Association ou uma de suas editoras aliadas. Este artigo destina-se

práticas, k 22, N 12391), e Cognições (todos os estudos, k 22,

subconjuntos reanalisados N 13012; melhor, k 17, N 7997) em não experimental


cruzamentos.
Reproduzimos estimativas de Anderson et al. (2010) e aplicar o PET, PEESE, p curva,
O alvo da nossa análise é se existem efeitos de pequeno estudo indicativos de viés, e em
e p uniforme para detectar e ajustar para efeitos de pequeno estudo. datapoints
caso afirmativo, quais seriam as estimativas de tamanho de efeito ajustada ao viés apropriadas.
suficientes estavam disponíveis para reavaliar os estudos experimentais de afectar
agressivo, comportamento agressivo, cognição agressivo, e excitação fisiológica, bem Nós apresentamos um de cada vez.
exclusivamente para o uso pessoal do usuário individual e não deve ser amplamente divulgadas.

como estudos transversais de afectar agressivo, comportamento agressivo, e agressivo


cognição. Tanto quanto o tamanho das amostras permitido, estudos foram subdivididos
Detecção de Bias
para criar estimativas separadas melhores práticas apenas e todos os-estudos por Anderson
et al. (2010) . Os números de estudos, os números totais de participantes, e fixo naive e A primeira pergunta é dirigida por inspeção das parcelas funil em As figuras 1 , 2 , 3 e
estimativas de efeitos aleatórios são fornecidas para cada subconjunto na tabela 1 . 4 . Encontramos dramática assimetria funil-enredo entre os experimentos de afetar
agressivo e entre experimentos de comportamento agressivo melhores práticas. Entre
esses subconjuntos, aplicação de critérios de melhores práticas parece ter exagerado,
ao invés de melhorado, a assimetria funil-enredo. Esta assimetria funil-enredo foi
testado por regressão de Egger. Os resultados são fornecidos em mesa 2 . O teste de

tabela 1 regressão para assimetria funil de-lote foi estatisticamente significativa no conjunto

Ingênuos Estimativas Effect-Size completo e BestPractices subconjunto de expericias que estudam afectar agressivo.
Além disso, o teste não foi significativa Egger na amostra total de experiências de
configuração de grupo k N Fixo Aleatória Eu 2 comportamento agressivo, mas foi na subamostra melhores práticas, o que sugere que
a aplicação de critérios de inclusão melhores práticas pode ter exacerbado funil-trama
agressivo afetar
assimetria.
Experimentar Melhor 18 1318 . 29 [0,24, 0,34] 0,34 [0,24, 0,42] 66 [45, 91]
Experimentar Completa 34 2879 . 17 [0,14, 0,21] 0,22 [0,15, 0,29] 72 [61, 89]
Corte transversal Melhor 7 4348 . 10 [0,07, 0,13] 0,10 [0,05, 0,16] 65 [12, 96]
Seção transversal completa 14 9811 . 15 [0,13, 0,17] 0,16 [0,08, 0,24] 93 [87, 98]
p uniforme também sugerido enviesamento significativo para experiências de comportamento

Comportamento agressivo
agressiva, tanto para a amostra completa e para o sub-amostra BestPractices.

Experimentar Melhor 23 2413 . 21 [0,17, 0,25] 0,21 [0,17, 0,25] 4 [0, 17]
Experimentar Completa 39 3328 . 17 [0,14, 0,20] 0,17 [0,14, 0,20] 0 [0, 7] No total, há claras evidências de efeitos de pequeno estudo em estudos de certos efeitos
Corte transversal Melhor 22 12391 . 29 [0,27, 0,30] 0,30 [0,25, 0,35] 88 [77, 93] violentos do jogo. Este resultado indica que os dados de meta-analíticos recolhidos podem ser
Seção transversal completa 37 29113 . 21 [0,20, 0,22] 0,24 [0,21, 0,28] 91 [84, 94]
contaminadas por polarizações publicação, analíticas, ou de selecção, e pode, portanto,

cognição agressivo produzir superestimativa enviesados ​de tamanhos de efeito.

Experimentar Melhor 24 2887 . 22 [0,18, 0,25] 0,22 [0,18, 0,27] 35 [0, 70]
Experimentar Completa 40 4,073.5 0,20 [0,17, 0,23] 0,20 [0,16, 0,24] 27 [0, 67]
Corte transversal Melhor 17 7997 . 21 [0,19, 0,23] 0,21 [0,15, 0,28] 87 [75, 94]
3 Em seu relatório original, Anderson et al. (2010) analisa relatório guarnição-and-fill só para as
Seção transversal completa 22 13012 . 18 [0,17, 0,20] 0,21 [0,15, 0,27] 91 [83, 95]
“melhores práticas” experimentos e “melhores parciais” cortes transversais. Destas exclusões, única Panee

Excitação fisiológica e Ballard (2002) tem quaisquer tamanhos de efeito inserido como experiências de melhores práticas
(um, agressivo afetam). Testamos o grau em que esta exclusão mudou os resultados da análise
Experimentar melhor 11 833 . 20 [0,13, 0,26] 0,21 [0,11, 0,31] 50 [0, 80]
ingênua e cortar-e-encher. Mesmo sem esta exclusão não fomos capazes de reproduzir seu resultado
Experimentar Completa 24 1770 . 14 [0,09, 0,18] 0,15 [0,09, 0,21] 35 [0, 71]
guarnição-and-fill para afetar agressiva: eles relatam r
Nota. K número de estudos; N número total em todos os estudos. Eu 2
percentagem de variabilidade em vigor estima devido à heterogeneidade. Todos os tamanhos de efeito em . 294, com zero estudos imputados, enquanto obtemos r . 247, com seis
Pearson rw om intervalos de confiança de 95%. estudos imputados ao lado esquerdo do gráfico de funil.
764 Hilgard, ENGELHARDT, E ROUDER
Este documento é protegido pela American Psychological Association ou uma de suas editoras aliadas. Este artigo destina-se
exclusivamente para o uso pessoal do usuário individual e não deve ser amplamente divulgadas.

Figura 1. enredo funil de estudos de agressivo afetar com contornos sombreados para 05 p . 10 (cinzento claro) e
. 01 p . 05 (cinzento escuro). Aplicação de critérios de melhores práticas parece enfatizar a significância estatística, e um nó de experimentos apenas
atingiu significância estatística. Um experimento de melhores práticas ( Ballard & Wiest de 1996 ) Encontra um efeito implausivelmente grande ( z
estudo 1,33), e um não-melhores práticas transversal parece ser um
outlier ( z 0,60; Urashima & Suzuki de 2003 ).

Os tamanhos de efeito ajustados o sinal oposto, mas nós o vemos como um hyperadjustment excesso de zelo por PET na
presença de grave assimetria funil-enredo. PEESE, p curva, e p estimativas uniformes
Tabela 3 relata tamanhos de efeito ajustado-polarização. Nós achamos que os estudos
foram estatisticamente significativa, enquanto que a estimativa de PET não foi. Em
transversais mostram pouca necessidade de ajuste para viés. No entanto, os experimentos
experimentos de comportamento agressivo, o relatório original propunha um
recebeu ajustamentos substanciais. Nós descrevemos esses ajustes abaixo.
ajustamento dos
. 03 a r . 18. Em contraste, as nossas análises
Em experimentos de afetar agressivo, o relatório original sugerido era necessário
recomendados ajustes descendentes maiores que variam de .06 para 0,19, reduzindo r para
nenhum ajuste para o subconjunto de melhores práticas. Em contraste, as nossas
0,15 (PEESE) ou tão pouco como .02 ( p uniforme). Métodos foram em conflito quanto a
análises sugeriram ajustes para baixo. Em relação à estimativa de efeitos fixos, p uniforme
saber se a estimativa foi estatisticamente significativa: PEESE e p curva indicada
sugerido um ajustamento de
significância estatística
. 05 a r . 24, e p curva sugerido um ajustamento
do . 08 a r . 21. PEESE modificada 0,15 para r . 14, e PET
ajustado a efeito em sentido contrário ( r . 12). 4 Nós fazemos 4 Um outlier teve influência moderada sobre esses resultados. Veja o suplemento para uma análise de

não interpretar este resultado uma indicação de que o efeito é literalmente de sensibilidade.
EFEITOS superestimada de jogos violentos 765
Este documento é protegido pela American Psychological Association ou uma de suas editoras aliadas. Este artigo destina-se
exclusivamente para o uso pessoal do usuário individual e não deve ser amplamente divulgadas.

Figura 2. enredo funil de estudos de comportamento agressivo com contornos sombreados para 05 p . 10 (cinza claro)
e 0,01 p . 05 (cinzento escuro). Aplicação de critérios de melhores práticas parece enfatizar a significância estatística,
e um nó de experimentos apenas atingiu significância estatística. Mais uma vez, a aplicação de critérios de melhores práticas favorece experimentos encontrar
significância estatística. Um estudo de melhores práticas transversal parece ser um outlier ( z
. 69; Matsuzaki, Watanabe, e Satou de 2004 ).

cado, ao passo que o PET e p uniforme não fez. Nossas análises também contestar a para r . 19, PEESE sugeriu o ajuste por . 04 a r . 18, e
conclusão original que estuda na melhor-práticas subamostra encontrar efeitos maiores PET sugeriu o ajuste por . 12 a r . 10. Novamente, PEESE,
do que os estudos não-melhores-práticas. PEESE, p uniforme, e p curva sugerido p curva, e p estimativas uniformes foram estatisticamente significativa, enquanto que a
estimativas idênticos para o total da amostra e o subamostra melhores práticas, estimativa de PET não foi.
enquanto o PET sugeriu que o efeito foi maior na amostra completa do que na As estimativas dos efeitos sobre a excitação fisiológica parecia robusta para ajustes para
subamostra melhores práticas. Este último resultado é talvez um artefato dos efeitos de efeitos de pequeno estudo. Entre as melhores práticas subconjunto de experimentos,
pequeno estudo mais fortes no subamostra melhores práticas. Em experimentos de PEESE, p curva, e p uniforme sugerido efeitos tão grandes como, ou maiores do que, a
cognição agressivo, o relatório original propunha um ajustamento dos estimativa ingénuos. PEESE,
p curva, e p estimativas uniformes foram estatisticamente significativas, e a estimativa do
. 02 a r . 20. Nossos ajustes são PET não foi.
divergente, talvez por causa da heterogeneidade moderada entre os estudos deste Entre os estudos transversais, os nossos avaliadores sugeriu a mínima necessidade de ajuste.

resultado. p uniforme sugeriu o aumento da estimativa de 0,02 para r PEESE, p curva, e p uniforme todos os tamanhos de efeito estimadas muito próximo da estimativa de

. 24, p curva sugerido um ajustamento de . 03 efeitos aleatórios ingénuos. Contudo,


766 Hilgard, ENGELHARDT, E ROUDER
Este documento é protegido pela American Psychological Association ou uma de suas editoras aliadas. Este artigo destina-se
exclusivamente para o uso pessoal do usuário individual e não deve ser amplamente divulgadas.

Figura 3. enredo funil de estudos da cognição agressivo com contornos sombreados para 05 p . 10 (cinza claro)
e 0,01 p . 05 (cinzento escuro). Os resultados aparecem moderadamente heterogêneo, mas não particularmente contaminado por
viés. Um estudo não-melhores práticas de secção transversal pode ser um outlier ( z 0,53; Sigurdsson, Gudjonsson,
Bragason, Kristjansdottir, & Sigfusdottir de 2006 ).

a heterogeneidade considerável nestes subconjuntos podem limitar a eficácia destes ajustes e acentuada assimetria funil-enredo. Finalmente, entre os experimentos de cognição
pode indicar a necessidade de uma análise mais aprofundada das diferenças na metodologia agressivo, p curva, p uniforme, e PEESE convergiram para o r
de estudo e populações. Existem alguns casos de convergência em nossas estimativas . 18-0,24 gama. Aqui também a cautela é necessária devido à heterogeneidade
apresentadas. Ao inspecionar efeitos sobre o comportamento agressivo em experimentos, p curva, residual considerável. Em resumo, nossas análises sugerem que certos efeitos em
p uniforme, e de PET estimado que os efeitos subjacentes foram tão pequeno como para ser experimentos provavelmente havia sido superestimada, às vezes mal. Efeitos sobre o
possivelmente indetectável em tamanhos típicos de amostra ( r comportamento agressivo foram estimados como sendo pequeno, possivelmente nulo.
Efeitos sobre agressivo afectar foram estimados como moderada em tamanho, embora o
. 02-0,09). Notavelmente, estas estimativas são altamente PET sugeriu um efeito nulo. Em contraste, os efeitos sobre a cognição e agressivo
consistente com alguns relatórios recentes ( Engelhardt, Mazurek, Hilgard, Rouder, & excitação fisiológica pareceu menos superestimada, e correlações a partir de estudos
Bartholow de 2015 ; Kneer, Elson, & Knapp de 2016 ; transversais parecia relativamente imparcial.
Przybylski, Deci, Rigby, e Ryan, 2014 ; Rasgar & Nielsen, 2014 ). Para efeitos
sobre agressiva afetar em experimentos, p curva,
p uniforme, e PEESE deram estimativas semelhantes uma vez que um outlier foi removido, r Alertamos o leitor que estes ajustamentos devem ser tomadas no contexto: Lembre-se que
. 17-0,20. Cuidado ainda é justificada à luz do nós não sabemos as propriedades de pequena amostra de
EFEITOS superestimada de jogos violentos 767

iments de agressivo afectar, nenhuma heterogeneidade permaneceu no PET e modelos


PEESE. homogeneidade semelhante foi alcançado entre os experimentos de comportamento
agressivo em ambas as melhores práticas e exemplos completos. Isto sugere que há pouca
variação residual em resultados de estudos que poderiam produtivamente ser explicado por
atributos de estudo. No caso das melhores práticas experimentos de comportamento
agressivo, havia tão pouca variância residual que um intervalo de confiança de

Eu 2 consistia do conjunto nulo / vazio. A documentação para metafor sugere que isto indica
“altamente (ou excessivamente) dados homogéneo” ( Viechtbauer de 2010 , Helpfile para con
fi nt.rma.uni), uma ausência incomum de variância de amostragem residual. Isto seria
consistente com a presença de polarização: tamanhos efeito neste subconjunto parecem
atingir significância estatística com improvavelmente alta precisão ( Ioannidis et al., 2006 ).

Por comparação, a heterogeneidade modesto permaneceu entre experiências de


cognição agressivo e entre a amostra cheia de experiências de afectar agressivo.
Este documento é protegido pela American Psychological Association ou uma de suas editoras aliadas. Este artigo destina-se

Heterogeneidade também estava presente entre trabalho não experimental,


particularmente em estudos de afetar agressivo. Mais trabalho será necessário para
determinar o que distingue esses estudos encontrando efeitos maiores daqueles
encontrando efeitos menores.

Dissertações não publicadas


exclusivamente para o uso pessoal do usuário individual e não deve ser amplamente divulgadas.

As parcelas funil anteriormente apresentados sugerem a presença de viés substancial na


publicação ou análise. Se assim for, então os resultados não significativos são menos
propensos a ser publicado; Assim, dissertações não publicados podem ser menos
propensos a ter encontrado significância estatística. Figura 5 destaca as experiências de
dissertação inéditos com parcelas de funil. Como se poderia esperar dado viés de
publicação, as dissertações não publicados geralmente preencher o lado esquerdo do
gráfico de funil.

mesa 2
Os testes de polarização e pequenas estudar os efeitos

Configuração Grupo b Egger SE ( b Egger) p Egger p p uniforme

agressivo afetar
Experimentar Melhor 3.667 0,780 <. 001 . 201
Experimentar Cheio 2.635 0,737 <. 001 . 861
Corte transversal Melhor
Figura 4. enredo funil de estudos de excitação fisiológica com contornos sombreados para 05 Corte transversal Cheio 0,123 1.883 . 948 . 661
p . 10 (cinzento claro) e 0,01 p . 05 (cinzento escuro).
Comportamento agressivo
Resultados não parecem ser sistematicamente contaminado por preconceitos.
Experimentar Melhor 1.537 0,549 . 005 . 002
Experimentar Cheio 0,451 0,390 . 248 . 009
Corte transversal Melhor 1,163 0,789 . 140 . 752
os estimadores ajustados e por isso não valorizar um em particular como sendo Corte transversal Cheio 1.326 0,589 . 024 . 900
susceptíveis de fornecer a estimativa mais precisa do efeito subjacente. Nós também se
abster de tomar muito a sério a significância estatística (não) dos tamanhos de efeito cognição agressivo

estimadas. ajuste de estimativa em face de viés substancial é fortemente dependente de Experimentar Melhor 1,372 0,761 . 071 . 684
Experimentar Cheio 0,883 0,544 . 104 . 814
pressupostos do modelo, e nós não souber como para avaliar se esses pressupostos
Corte transversal Melhor 0,447 1.469 . 761 . 628
segurar e como estimativas robustas são a violações. Naturalmente, estes problemas não
Corte transversal Cheio 0,334 1.366 . 807 . 544
são exclusivos para nossas análises, como eles mantêm amplamente em todo o campo de
meta-análise. Excitação fisiológica
Experimentar Melhor 0,137 1.220 . 911 . 797

heterogeneidade residual. Modelar a relação entre Experimentar Cheio 1.295 0,714 . 070 . 930

SE tamanhos s e efeito também reduziu substancialmente a heterogeneidade residual em alguns Nota. Uma análise omitidos por número insuficiente de estudos. texto em negrito destaca testes
subconjuntos dos dados. Entre as melhores práticas exper- significativos ao nível 0,05.
768 Hilgard, ENGELHARDT, E ROUDER

Tabela 3
Ajustado Estimativas Effect-Size

p curva
dois
ANIMAL Eu PET PEESE Eu PEESE 2 p uniforme

agressivo afetar
Experimentar Melhor . 12 [ 0,29, 0,06] 0 [0, 83] . 14 [0,06, 0,23] 0 [0, 86] . 24 [0,08, 0,36] . 21
Experimentar Cheio . 10 [ 0,27, 0,08] 58 [44, 85] . 08 [ 0,02, 0,18] 60 [47, 86] . 24 [0,11, 0,35] . 20
Seção transversal Melhor
Secção transversal completa . 16 [ 0,04, 0,35] 94 [88, 98] . 17 [0,04, 0,29] 94 [88, 98] . 16 [0,12, 0,24] . 16

Comportamento agressivo

Experimentar Melhor . 07 [ 0,04, 0,18] 0 [] . 15 [0,09, 0,21] 0 [] . 02 [ 0,23, 0,15] . 09


Experimentar Cheio . 13 [0,04, 0,21] 0 [0, 61] . 15 [0,10, 0,20] 0 [0, 61] . 02 [ 0,23, 0,15] . 08
Corte transversal Melhor . 29 [0,16, 0,41] 87 [77, 94] . 30 [0,23, 0,37] 88 [78, 94] . 27 [0,24, 0,31] . 28
Seção transversal completa . 21 [0,12, 0,28] 90 [84, 94] . 24 [0,19, 0,28] 91 [85, 94] . 22 [0,19, 0,25] . 23

cognição agressivo
Experimentar Melhor . 10 [ 0,05, 0,24] 33 [0, 65] . 18 [0,11, 0,24] 32 [0, 65] . 24 [0,15, 0,31] . 19
Este documento é protegido pela American Psychological Association ou uma de suas editoras aliadas. Este artigo destina-se

Experimentar Cheio . 11 [0,00, 0,22] 29 [0, 64] . 16 [0,10, 0,21] 27 [0, 62] . 24 [0,14, 0,32] . 19
Corte transversal Melhor . 24 [0,07, 0,39] 88 [76, 95] . 23 [0,14, 0,32] 88 [77, 95] . 18 [0,14, 0,22] . 19
Seção transversal completa . 20 [0,05, 0,33] 91 [84, 96] . 22 [0,13, 0,30] 91 [84, 96] . 16 [0,13, 0,20] . 18

Excitação fisiológica
Experimentar Melhor . 19 [ 0,12, 0,47] 53 [0, 83] . 21 [0,04, 0,37] 54 [0, 84] . 26 [0,08, 0,37] . 28
Experimentar Cheio . 01 [ 0,18, 0,17] 31 [0, 66] . 09 [0,00, 0,17] 32 [0, 65] . 26 [0,08, 0,37] . 28

Nota. K número de estudos; N número total entre os estudos; Eu 2 heterogeneidade residual.


exclusivamente para o uso pessoal do usuário individual e não deve ser amplamente divulgadas.

intervalo de confiança (CI) em I 2 consiste no conjunto nulo / vazio porque de dados altamente homogéneos. Uma análise omitidos por número insuficiente de
estudos. O texto em negrito indica onde o IC de 95% da estimativa da precisão com efeito de teste (PET) exclui a zero, o que sugere que o efeito subjacente é
diferente de zero e que a precisão-Efeito Estimado com o erro padrão (PEESE) deve ser favorecida em detrimento de PET. Todos os tamanhos de efeito em
Pearson r.

aplicamos 2 testes para examinar duas relações: Em primeiro lugar, a relação entre a estratégia de chumbo para três categorias de estudos: aqueles que encontraram significado em

significância estatística e status de publicação e, segundo, a relação entre o estado de todos os resultados, aqueles que encontraram significado em alguns resultados, e aqueles que

publicação e seleção como satisfazendo critérios de melhores práticas. tabela 4 fornece encontraram significado em há resultados. Todos os testes foram estatisticamente significativas.

essas frequências. As contagens liberais assumem a independência de cada entrou Em todos os paradigmas, dissertações não publicados foram muito menos propensos a ter

tamanho do efeito, enquanto as contagens conservadores agregar todos os tamanhos de significância estatística encontrado do que os estudos publicados (testes liberais e conservadoras, p

efeito dentro de cada estudo. A agregação neste último contagem


. 001). Da mesma forma, dissertações inéditas de tudo

Figura 5. parcelas funil de todos os experimentos de agressivo afetar, comportamento e cognição. Dissertações não apresentados em qualquer outro formato de
publicação são indicados com Xs, enquanto todos os outros estilos de publicação (por exemplo, artigos de revistas, capítulos de livros e anais de conferências)
são indicados com pontos cheios. contornos sombreados representam dois atados p valores entre 0,10 e 0,05 (cinzento claro) e entre 0,05 e 0,01 (cinzento
escuro). resultados não significativos são menos propensos a ser publicado, e no caso de estudos experimentais de afectar e de comportamento, dissertações
sugerem efeitos substancialmente menores.
EFEITOS superestimada de jogos violentos 769

tabela 4 A conclusão principal deste achado é que a evidência experimental para os efeitos do
A significância estatística e melhores práticas de codificação de tamanhos de efeito em jogo violento e vídeo são menos som do que foi apresentado. A meta-análise original
Dissertações não publicados concluiu que todos os resultados foram estatisticamente e praticamente significativa. No
entanto, em nossa opinião, o grau de assimetria nas parcelas de funil, especialmente
esquema de codificação Liberal
aqueles em As figuras 1 e 2 , Faz com que uma tal conclusão questionável. Encontramos
vez após o ajuste que os efeitos dos jogos de vídeo violentos no comportamento agressivo
Significado estatístico
e afeta em experimentos provavelmente menor do que o previsto, e pode ser tão pequeno
formato de publicação sim Não (r
dissertação inédita 4 30 . 02-0,15) como para ser muito
De outros 201 125
desafiador para detectar na maioria dos experimentos. Juntas, essas análises indicam que a
melhores práticas rotuladas
evidência dos efeitos causais de jogos de vídeo violentos sobre os resultados agressivos,
formato de publicação sim Não particularmente agressivo afeto e comportamento agressivo, tem sido exagerada. A título de
dissertação inédita 4 30
comparação, observa-se que a evidência de efeitos experimentais sobre cognitions
De outros 208 118
agressivos (como oposição a agressivo ou afectar o comportamento agressivo) parece ser

esquema de codificação conservadora menos afectado pelo viés.

Significado estatístico
Este documento é protegido pela American Psychological Association ou uma de suas editoras aliadas. Este artigo destina-se

Instamos alguma cautela na interpretação dos tamanhos de efeito ajustados. Um problema é


formato de publicação Todos os resultados Alguns resultados Nenhum desfechos que as estimativas ajustadas são bastante divergentes; por exemplo, para agressivo afetar em
dissertação inédita 2 2 14 um experimento de melhores práticas, que vão desde r
De outros 73 34 29
. 24 a r . 12. Vemos isso como consequência da
melhores práticas rotuladas
o elevado grau de viés neste conjunto de dados. Houve pouco ou nenhum viés, os
formato de publicação sim Não estudos teriam valor probatório, e os vários ajustes metanálises iria ser em grande parte
dissertação inédita 3 15
no acordo. Em vez disso, em certos subconjuntos o viés é muito forte, e assim a
De outros 83 62
estimativa do tamanho do efeito é talvez demasiado dependente das premissas de
exclusivamente para o uso pessoal do usuário individual e não deve ser amplamente divulgadas.

modelagem subjacentes ao estimador de meta-analítica. Basta dizer que há fortes sinais

paradigmas eram muito menos propensos a ser incluído como melhores práticas do que os estudos
de polarização, e estamos confiantes apenas que os verdadeiros tamanhos de efeito são

publicados (teste liberal, p . 001; teste conservador, p menores do que meta-análise ingênua originalmente relatado.

. 003). Na medida em que essas dissertações inéditas podem reflectir a investigação competente
menos influenciada pela pressão publicação, estes resultados podem ser motivo de preocupação.
Em contraste com a literatura experimental, a literatura transversal parece relativamente
Resultados semelhantes são também obtidos quando a restrição estas análises às experiências a
imparcial, e fornece uma clara evidência de uma associação entre o uso violento videogame
significância estatística: teste, liberal, p
e pensamentos agressivos, sentimentos e comportamentos. Estas correlações, no entanto,
. 001, teste conservador, p . 001; melhores práticas
não pode demonstrar causalidade, e pode refletir um processo de seleção (em que as
codificação, teste liberal, p . 001, teste conservador, p . 001.
pessoas agressivas podem preferir jogos violentos) ou confusão por variáveis ​terceiros (em
estimativas do tamanho do efeito meta-analítica também foram drasticamente reduzida no
que algum outro traço ou processo faz com que as pessoas a jogar jogos de vídeo violentos
interior do conjunto de experiências relatadas nos dissertações não publicados. Para agressiva
e se comportar de forma agressiva) . A literatura longitudinal aparece em conflito a respeito
afetar, a estimativa de efeitos aleatórios caiu de r
de se jogos violentos causar comportamento agressivo ou comportamento agressivo
. 22 [0,15, 0,29] na amostra total a r . 02 [ 0,10, 0,15] em unpub-
provoca jogos violentos (por exemplo, Breuer, Vogelgesang, Quandt, e Festl de 2015 ;
dissertações cido; para o comportamento agressivo, a estimativa caiu de
r . 17 [0,14, 0,20] na amostra total a r . 01 [ 0,11, 0,12] em
dissertações não publicadas; e para cognições agressivos, a estimativa caiu de r
Etchells, Gage, Rutherford, & Munafo de 2016 ; Willoughby, Adachi, & Good, 2012 ). Além
. 20 [0,16, 0,24] na amostra total a r . 13 [0,02,
disso, a tentativa de ajustar para as variáveis ​de confusão, tais como sexo parece reduzir
. 24] em dissertações não publicados. Estas estimativas devem causar preocupação,
substancialmente tamanhos de efeito ( Anderson et al., 2010 ; Ferguson de 2015 ; Furuya-Kanamori
eles indicam que os estudos não encontrar evidências significativas para efeitos
& Doi de 2016 ; mas ver críticas de Boxer, Groves, e Docherty de 2015 ). Além disso,
violenta-jogo são mais propensos a ir inédito.
encontramos uma considerável heterogeneidade nos tamanhos de efeito entre os estudos
transversais; pesquisas futuras devem determinar por que certas secções transversais
Discussão
encontrar tamanhos substancialmente maiores ou menores efeitos.
Os nossos resultados indicam que há uma forte evidência para a polarização publicação
substancial nos estudos experimentais de meta-analisados ​por
Anderson et al. (2010) . viés de publicação foi mais forte entre os experimentos com
resultados de comportamento agressivo afetar e agressivo, comportamento sendo
Considerações teóricas
talvez o resultado mais importante de considerações pragmáticas e teóricas. Além
disso, o viés foi maior entre os estudos identificados pelos autores originais, utilizando Os resultados atuais sugerem que as teorias de agressão pode desfrutar de menos
as melhores práticas, o que parece motivo de preocupação. Viés era relativamente apoio empírico do que se pensava anteriormente. Consideramos teorias de agressão e
ausente do efeito do teste experiências sobre a cognição e agressivo excitação seus mecanismos propostos, possíveis revisões desejáveis ​para essas teorias, e áreas
fisiológica. viés publicação também está ausente a partir de estudos da secção que precisam de mais testes.
transversal, que encontram as correlações entre o jogo violento e traços agressivos.
Os mecanismos teóricos utilizados para explicar os efeitos de jogos de vídeo violentos,

especialmente aqueles em situações experimentais, dependem fortemente


770 Hilgard, ENGELHARDT, E ROUDER

sobre o conceito de “priming”, no qual a exposição a algum estímulo ativa um pensamento análise de vários estudos, e efeitos pode ser demasiado pequeno para detectar com fiabilidade
relacionado. Uma perspectiva teórica comum na psicologia social é que apenas pensando os moderadores em estudos experimentais individuais. Nós elaborar sobre cada ponto abaixo.
sobre um comportamento aumenta a probabilidade de realizar esse comportamento (ou
seja, “ação ideomotor”; Bargh & Chartrand de 1999 ; James de 1890 ). Além do mais, não é Em primeiro lugar, estamos preocupados que o viés de publicação pode ter o efeito
preciso escolher deliberadamente a pensar sobre um determinado comportamento; em adicional de ocultar padrões de moderação entre os estudos na meta-análise. Imagine que
vez disso, pistas no ambiente podem causar um a pensar em certos comportamentos. duas séries de estudos medir os efeitos de jogos violentos a comportamento agressivo em
Pensamentos são esperados para ser automaticamente e inevitavelmente influenciados duas populações diferentes. Imaginar ainda que em uma população, o tamanho do efeito é
pela percepção, como a percepção é uma forma automática de pensamento geralmente moderado, e na outra população, o tamanho do efeito é zero. viés de publicação favorecerá
não sujeitos a controle deliberado. Assim, espera-se que estímulos ambientais para ativar resulta da população de efeito moderado e esconder os resultados da população de efeito
pensamentos, que por sua vez influenciam o comportamento agressivo; este “ambiente zero (ou pior, incentivar p Hacker, de tal forma que a população de zero efeito parece ter um
para percepção de comportamento” ( Bargh & Chartrand de 1999 , P. 468) da cadeia tamanho efeito moderado). Depois de viés de publicação, moderadores teoricamente
argumenta-se a funcionar sem problemas, de forma eficiente, de forma automática e relevantes têm sido escondida por efeitos smallstudy. Isso pode ser em parte porque Anderson
inconscientemente. Além disso, Bargh e Chartrand (1999) argumentam que esses et al. (2010) teve dificuldade em encontrar moderadores significativas em sua análise. Em
processos influenciam também afetam, como a avaliação automática do ambiente ativa segundo lugar, estamos preocupados que os efeitos podem ser muito pequeno para
estados afetivos. contas teóricas dos efeitos dos jogos de vídeo violentos propor um detectar seus moderadores em experimentos individuais. Se os efeitos são de fato tão
processo muito similar. Considere o GAM ( Anderson & Bushman de 2002 ), Talvez o mais pequeno como nós estimamos, em seguida, estudos individuais terão de ser muito grande
Este documento é protegido pela American Psychological Association ou uma de suas editoras aliadas. Este artigo destina-se

frequentemente aplicada a teoria de como e por que os videogames violentos causaria um


para detectar o efeito principal, muito menos um moderador significativo. Por exemplo, para
comportamento agressivo. GAM teoriza que o comportamento agressivo é causada por
o comportamento agressivo em um experimento bem projetado, o nosso maior estimativa
estados internos de excitação, agressivo afetar, e cognições agressivos. videogames
do tamanho do efeito recomenda um ajuste de r
violentos são teorizados ser uma influência ambiental, estimulando um comportamento
agressivo, aumentando a excitação, priming a acessibilidade de pensamentos agressivos
e sentimentos agressivos inspiradoras. Efeitos a longo prazo também são por vezes
explicado neste quadro; com a exposição repetida ao longo do tempo, cognições
. 21 a r . 15. Embora isto parece
agressivas deverão tornar-se “cronicamente acessível”, fazendo com que a personalidade
ser um pequeno ajuste, é de importância prática considerável. Considerando que a
exclusivamente para o uso pessoal do usuário individual e não deve ser amplamente divulgadas.

do jogador para se tornar mais agressivo ( Bushman & Anderson, 2002 ).


estimativa naïve sugere um tamanho de amostra de 136 é suficiente para poder de 80%
num teste unilateral, a estimativa PEESE que sugere n
270 é necessária-a duplicação do tamanho da amostra.

Os outros ajustes todas sugerem que o tamanho das amostras incríveis seria
necessário: p curva, r . 09, n 759; ANIMAL, r . 07, n
1.250; p uniforme, r . 02, n 15.400. Para detectar moderadores do
efeito exigiria tamanhos de amostra ainda maiores. Nesse sentido, a maioria dos experimentos
Os modelos do GAM e semelhantes em psicologia social antecipar um efeito
de relatórios moderadores de efeitos violenta-jogo são susceptíveis de ser mal fraca potência.
experimental clara e confiável de meios violentos em comportamento agressivo. Os
resultados atuais mostram a evidência para tal efeito é exagerado. Consequentemente,
No entanto, muitos estudos publicados relatam interações estatisticamente
pensamos que a evidência para a GAM é exagerado também. Neste sentido, nossos
significativas de conteúdo jogo violento por diferenças individuais, tais como a raiva traço
resultados se encaixam bem com uma onda de estudos recentes que questionam
ou sexo. Nós suspeitamos que os moderadores significativas são testados e descobriu
descobertas fundamentais em priming social e do “ambiente de percepção para o
post hoc e pode não ser propensos a replicar. Esperamos que não é incomum para
comportamento” cadeia. Esses estudos incluem efeitos nulos de primos de dinheiro sobre
coletar uma bateria de medidas de personalidade breves ao lado de uma manipulação
as atitudes políticas ( Rohrer, Pashler, & Harris de 2015 ), Efeitos nulos de primos de
experimental. Como estas medidas devem ser aplicadas em análise pode ser flexível,
inteligência em tarefas de conhecimento geral ( Shanks et al., 2013 ), E os efeitos nulos de
talvez eles são aplicados como possíveis moderadores quando um efeito significativo
primos limpeza em julgamentos morais ( Johnson, Cheung, e Donnellan de 2014 ). Estas
principal não foi encontrado. Quando muitos moderadores são testados, as taxas de erro
falhas de replicar também são encontrados na pesquisa agressão: Foi relatado
tipo 1 aumentará substancialmente devido ao grande número de testes efectuados. Um
anteriormente que a exposição aos primos temperatura palavra aumentar atribuições
hostis de comportamentos ambíguos ( DeWall & Bushman de 2009 ), Mas uma replicao de nós publicou tal interação, Raiva Traço

com uma amostra maior encontra nenhuma tal efeito ( McCarthy de 2014 ). Teorias de
agressão pode ter de reconsiderar se estímulos acidentais de fato ativar pensamentos Exposição Violent Game ( Engelhardt,

agressivos (a “ativação de pensamentos” o próprio ser bastante ambígua definido), e que Bartholow, & Saults de 2011 ), E ter sentido dificuldade em replicar-lo ( Engelhardt et

tipo de pensamentos agressivos são necessárias e suficientes para provocar um al., 2016 ). Outra análise exploratória da nossa, alegando para encontrar efeitos

comportamento agressivo. sobre controle cognitivo ( Engelhardt, Hilgard, & Bartholow de 2015 ), Foi
provavelmente confundidos, como tais efeitos “ego-esgotamento” não podia ser
detectada num esforço de replicação de larga escala ( Hagger et al., No prelo ). A
diversidade de moderadores relatados ea raridade de sua replicação sugerir
Moderadores do efeito. comentários recentes têm chamado para maior ênfase possíveis deficiências na literatura de efeitos jogo violento.
pesquisa sobre quem é mais provável de ser influenciada por efeitos violenta-jogo, e,
portanto, maior atenção aos potenciais moderadores de efeitos violenta-jogo (ver, por O papel mediador da agressiva afeta? O GAM prevê que agressiva afetar desempenha

exemplo, Krähe, no prelo ). Nossos resultados sugerem tais esforços podem ser um papel de mediador entre os meios violentos e comportamento agressivo. No entanto, não

especialmente desafiador. viés de publicação na literatura pesquisas anteriores encontramos evidências claras de que os videogames violentos causar agressiva afetar em

provavelmente obscurecida padrões significativos de moderação de meta- experiências; em vez disso, os estudos indicaram uma contaminação grave por polarização.
EFEITOS superestimada de jogos violentos 771

Nós suspeitamos que este viés grave é causada por problemas na inferência que Talvez modelos de seleção ( Vevea & Hedges de 1995 ) Poderia fornecer um ajuste
protegem a hipótese de falsificação nesta meta-análise. resultados do estudo significativos mais eficaz e matizada. Estamos particularmente animado com a possibilidade de
sobre agressiva afetam são de fato interpretado como evidência de que os videogames métodos de seleção Bayesiana ( Guan & Vandekerckhove de 2016 ) Que puxam a força
violentos causar sentimentos agressivos. No entanto, os resultados do estudo não de informação prévia razoável. Os ajustes apresentados, em conjunto com nossas
significativas nem sempre são interpretados como evidências de que jogos violentos não parcelas de funil, no entanto, têm valor na indicação preconceitos e dificuldades nessa
causam sentimentos agressivos, e em vez disso, são por vezes tomada como evidência de literatura de pesquisa.
que os estímulos diferem apenas no conteúdo violento e não em outras dimensões de
confusão. A hipótese pode ser alterado após análises para apoiar a teoria ( Kerr de 1998 ). Outra limitação de metaregression é que os efeitos de pequena estudo pode ser causada por

fenómenos além viés ou publicação p hacking. Por exemplo, uma pequena pesquisa pode medir o

comportamento agressivo completamente, com muitas perguntas, enquanto que um grande

Se autores relataram seus resultados nulos como demonstrações de equivalência de levantamento só pode dar ao luxo de poupar uma ou duas perguntas. De modo semelhante, os

estímulos, eles foram excluídos da meta-análise. Anderson e seus colegas (2010) tornar tamanhos das amostras em experiências pode ser menor, e tamanhos de efeito maior, do que em

este ponto explicitamente, dizendo: estudos em corte transversal. O relatório atual é capaz de resolver parcialmente esta preocupação,

seguindo a decisão dos autores originais para analisar pesquisa experimental e transversal
Estudos baseados em jogos de vídeo violentos e não violentos que foram pré-selecionados separadamente. Ainda assim, pode haver genuínas razões teóricas e metodológicas que estudos
para [criar estados afetivos equivalentes], obviamente, não são testes apropriados do
maiores encontrar efeitos menores do que fazer estudos menores. Também existem limitações
arousal- de curto prazo e afetam indutores efeitos dos jogos de vídeo violentos. Assim, eles
Este documento é protegido pela American Psychological Association ou uma de suas editoras aliadas. Este artigo destina-se

substantivas. Nós se abstiveram de inspecção dos tamanhos dos efeitos parciais a partir de estudos
devem ser excluídas das análises destinadas a testar esta hipótese específica. (Página 156)
da secção transversal, uma vez que estes podem ser um desafio para sintetizar adequadamente.

Também se abstiveram de inspeção de estudos longitudinais como não há pontos de dados

Nossa preocupação é que os estímulos podem não ter sido verdadeiramente pré seleccionado para suficientes para permitir uma boa estimativa. É possível, mesmo provável, que não são pequenos,

mas detectáveis ​efeitos longitudinais de muitas horas de jogo ao longo do tempo, mesmo se os
criar estados afectivos equivalentes; os autores poderão apresentar os seus resultados post hoc
efeitos de uma breve exposição de 15 minutos em uma experiência são indetectavelmente
como demonstrações de equivalência de estímulos, e, portanto, os estudos são descartados da
pequena. Todos os mesmos, a realização de estudos longitudinais devem ter o cuidado de manter
análise. Pré-inscrição de hipóteses e resultados impediria essa ambiguidade.
um processo de investigação transparente e publicar os resultados independentemente da sua
exclusivamente para o uso pessoal do usuário individual e não deve ser amplamente divulgadas.

importância para que a literatura de pesquisa longitudinal ser encontrados a sofrer de deficiências
Além disso, parece haver pouca justificativa teórica para por jogos violentos deve
semelhantes. Finalmente, embora o mesmo se os efeitos de uma breve exposição de 15 minutos
causar afetar agressivo. A ênfase é colocada geralmente em vez da activação de
em uma experiência são indetectavelmente pequena. Todos os mesmos, a realização de estudos
pensamentos agressivos. De fato, os primeiros relatórios especificamente argumentou
longitudinais devem ter o cuidado de manter um processo de investigação transparente e publicar
contra os efeitos violenta-jogo em afetar: Anderson e Dill (2000 , P. 774) escrever
os resultados independentemente da sua importância para que a literatura de pesquisa longitudinal
“Conteúdo violento, por si só, no entanto, na ausência de outra provocação, é provável
ser encontrados a sofrer de deficiências semelhantes. Finalmente, embora o mesmo se os efeitos
que tenha pouco impacto direto sobre afetar.” Relatórios mais recentes a hipótese de que
de uma breve exposição de 15 minutos em uma experiência são indetectavelmente pequena. Todos
a excitação, a cognição agressivo, agressivo e afeta tendem a coactivate; aumentos na
os mesmos, a realização de estudos longitudinais devem ter o cuidado de manter um processo de
cognição agressivos, por conseguinte, são hipoteticamente para provocar aumentos na
investigação transparente e publicar os resultados independentemente da sua importância para que
afectar agressivo. Talvez este mecanismo poderia ser testados directamente.
a literatura de pesquisa longitudinal ser encontrados a sofrer de deficiências semelhantes.

Finalmente, embora o Anderson et al. (2010) meta-análise é a encontrar provas meta-análise mais

citado de efeitos dos jogos de vídeo violentos, não é o único tal meta-análise. Uma meta-análise de Greitemeyer

e Mugge (2014) encontra evidências de efeitos violenta-jogo resumindo a literatura de pesquisa

limitações publicada porque o Anderson et al. (2010) meta-análise. Nossa inspeção preliminar de seu conjunto

de dados revela menos acentuada assimetria enredo funil, embora uma correção retirou a alegação
Há limitações importantes para as análises que apresentamos. Apesar de estarmos de que apare-and-fill sugeriu que o efeito sobre os resultados agressivos tinha sido subestimado
confiantes na capacidade de parcelas de funil para detectar efeitos de pequeno estudo, por polarização. O manuscrito corrigido agora relata nenhum ajuste sugerido pela
que são menos certeza sobre a capacidade dos nossos ajustes para fornecer estimativas guarnição e enchimento. Esperamos reanalisar esta meta-análise no futuro também.
de tamanho efeito precisos. Esperamos que, pelo menos, que eles são estimativas
razoáveis ​e pode estar mais perto da verdade do que é a estimativa ingênua. No entanto,
as propriedades estatísticas dos estes ajustes não são bem compreendidos, e o viés,
as pistas para
eficiência e robustez desses avaliadores não são conhecidos em qualquer forma
sistemática ou formal. Além disso, eles são, cada um compreendido a executar mal sob Meta-análise, embora emocionante e informativo, é repleta de limitações difíceis.
certas condições: PET subestima efeitos não nulas, PEESE sobrestima efeitos nulos, e p e Uma maneira produtiva de evitar essas limitações é a realização de grande escala,
curva relatórios, replicação de colaboração registrados. Em um relatório de replicação
registrada, colaboradores revisar e editar os métodos e as medidas propostas até que
p uniforme pode subestimar ou sobrestimar efeitos no contexto de todos concordam que a experiência fornece um teste justo e eficaz da hipótese. Uma
p pirataria ou heterogeneidade. Estas limitações de p e curva p uniforme são amostra de tamanho pré-determinado é recolhido, e os resultados são publicados
particularmente importantes preocupações sobre a análise flexível do competidor independentemente do seu significado estatístico. Esta abordagem protege contra erros
tempo de reação da Task (dado Elson et al., 2014 ) E a presença de heterogeneidade causados ​pela paragem condicional, análise flexível, e as pressões de publicações (ver,
em certas análises. É possível que o efeito subjacente é substancial, mas nossas por exemplo, Hagger et al., No prelo ; Matzke et al., 2015 ). Sugerimos que aqueles que
estimativas são tendenciosos em alguma direção pela p Hacker, em um ou mais planejam um relatório tais registrada considerar o uso de um paradigma do jogo
estudos, e é possível que alguns modificado ( Elson, Bruer, Van Looy,

p curva/ p estimativas uniformes são muito altos por causa da heterogeneidade.


772 Hilgard, ENGELHARDT, E ROUDER

Kneer, e Quandt de 2013 ; Elson & Quandt de 2014 ; Engelhardt, Hilgard, & apoiar as suas conclusões e se recusam a acreditar que os resultados do outro
Bartholow de 2015 ; Engelhardt, Mazurek, et al., 2015 ; Kneer et al., No acampamento. Não podemos suportar a ideia de impasse mais 30 anos. Nossa melhor
prelo ). Em tal paradigma, os investigadores tomar um único jogo de vídeo esperança para um teste de hipótese precisa e informativa repousa sobre um esforço
e editar seu código. Isso permite que os pesquisadores para manipular internacional, colaborativo e transparente investigação, incluindo os proponentes, céticos
conteúdo violento, preservando o conteúdo do jogo (regras, controles, nível e terceiros desinteressados.
de design, etc.). Isso seria minimizar as preocupações que observados
efeitos de jogos violentos em vez disso são causados ​por diferenças de
confusão entre estímulos. Em comparação, o uso de jogos disponíveis no
mercado não permite tal controle, e as diferenças de violência são Referências

susceptíveis de ser confundido com outras diferenças em jogo, dificuldade, Aloe, AM (2014). Uma investigação empírica de tamanhos dos efeitos parciais na meta-análise de
ou competição. Do lado de fora de um esforço de replicação registrado, há dados de correlação. The Journal of General Psychology,
muitas outras maneiras de melhorar a qualidade da pesquisa jogos 141, 47-64. http://dx.doi.org/10.1080/00221309.2013.853021
violentos. Os investigadores devem considerar a realização e publicação Força-Tarefa American Psychological Association em mídia violenta. (2015).
de repetições diretas. amostras maiores aumentaria o valor probatório dos Relatório técnico sobre a revisão da literatura videogame violento.
estudos individuais. p Retirado de https://www.apa.org/news/press/releases/2015/08/
técnico-violenta-games.pdf
Anderson, CA, & Bushman, BJ (2002). agressão humana. Annual Review of
Este documento é protegido pela American Psychological Association ou uma de suas editoras aliadas. Este artigo destina-se

Psychology, 53, 27-51. http://dx.doi.org/10.1146/annurev


. 05),
. psych.53.100901.135231
censura de estudos ou subgrupos que não conseguem encontrar um efeito, e
Anderson, CA, e Dill, KE (2000). videogames e pensamentos agressivos, sentimentos e
flexibilidade na quantificação dos resultados agressivos. Finalmente, a partilha aberta
comportamento em laboratório e na vida. Journal of Personality and Social Psychology,
de dados permitiria validação cruzada: uma interação encontrada em um experimento
78, 772-790. http://dx.doi.org/10
poderia, então, ser testados no experimento de outro pesquisador. Isto permitirá . 1037 / 0022-3514.78.4.772
também a meta-análises de dados individuais dos participantes, uma forma Anderson, CA, Shibuya, A., Ihori, N., balanço, SR, Bushman, BJ, Sakamoto, A.,. . . Saleem,
particularmente potente e preciso de meta-análise (ver, por exemplo, Riley, Lambert, & M. (2010). efeitos violentos de videogame sobre a agressão, empatia e comportamento
exclusivamente para o uso pessoal do usuário individual e não deve ser amplamente divulgadas.

Abo-Zaid, 2010 ), O que ajudaria a detectar os moderadores do efeito, se houver. pró-social em países orientais e ocidentais: Uma revisão meta-analítica. Psychological
Bulletin, 136, 151-
173. http://dx.doi.org/10.1037/a0018251

Tal compartilhamento de dados é duplamente importante na meta-análise. Louvamos Ballard, ME, & Wiest, JR (1996). Mortal Kombat: Os efeitos do videogame violento jogar
em hostilidade dos machos e cardiovascular responder. Journal of Applied Social
Anderson e seus colegas para compartilhar os dados e para responder a perguntas a
Psychology, 26, 717-730. http: //dx.doi
respeito de como melhor reproduzir suas análises. Sugerimos que o futuro meta-análises
. org / 10,1111 / j.1559-1816.1996.tb02740.x
de rotina incluem os dados, gráficos de funil e outros materiais complementares no
Bargh, JA, & Chartrand, TL (1999). A automaticidade insuportável de ser. American
registro publicado ( Lakens, Hilgard, & Staaks, 2016 ). Outros investigadores devem ser
Psychologist, 54, 462-479. http://dx.doi.org/10.1037/ 0003-066X.54.7.462
incentivados a inspecionar e reproduzir meta-análises. As meta-análises que não podem
ser inspecionados ou reproduzidas devem ser vistos com preocupação. Borenstein, M. (2009). Os tamanhos de efeito de dados contínuos. Em H. Cooper, LV
Hedges, JC & Valentine (Eds.), O manual de síntese de pesquisa e meta-análise ( 2a ed.,
Pp. 221-235). New York, NY: Russell Sábio Foundation.

Boxer, P., Groves, CL, e Docherty, M. (2015). jogos de vídeo, de fato, influenciar crianças e
Resumo adolescentes agressão, comportamento pró-social e desempenho acadêmico: Uma leitura
mais clara de Ferguson (2015). Perspectivas sobre Psychological Science, 10, 671-673. http://dx.doi.org/10.1177/
A literatura de pesquisa, tal como analisada por Anderson et al. (2010)
1745691615592239
parece conter uma maior polarização do que analisa a sua publicação inicial
trimand-enchimento e conclusões indicado. Isto é especialmente verdadeiro para aqueles
Breuer, J., Vogelgesang, J., Quandt, T., & Festl, R. (2015). jogos violentos de vídeo e agressão
estudos que foram selecionados como a utilização de melhores práticas, como a aplicação de
física: evidências para um efeito de selecção entre os adolescentes. Psicologia da Popular
critérios de melhores práticas parecia favorecer resultados estatisticamente significativos.
Meios de Cultura, 4, 305-328. http: //
Efeitos em experimentos parecem ser superestimada, particularmente aqueles de efeitos de dx.doi.org/10.1037/ppm0000035
jogos de vídeo violentos a comportamento agressivo, que foram estimados como sendo muito Bushman, BJ, & Anderson, CA (2002). jogos de vídeo violentos e expectativas hostis:
próximo de zero. Os insights teóricas sobre as causas e mecanismos de agressão humana Um teste do Modelo de agressão em geral. Personalidade e Psicologia Social
supostamente adquirida através deste programa de pesquisa podem desfrutar de menos apoio Bulletin, 28, 1679-1686. http://dx.doi.org/
empírico do que originalmente relatado. Pode ser apropriado para suavizar a retórica usada em 10,1177 / 014616702237649

revisões de literatura e declarações políticas para respeitar essa incerteza ea possibilidade de Bushman, BJ, Rothstein, RH, & Anderson, CA (2010). Muito barulho por algo: efeitos de
jogos de vídeo violentos e uma escola de arenque vermelho: Responder a Ferguson e
efeito tamanhos menores do que originalmente relatado.
Kilburn (2010). Psychological Bulletin, 136,
182-187. http://dx.doi.org/10.1037/a0018718
Carter, EC, & McCullough, ME (2014). viés de publicação e o modelo de força limitada de
Em vez de aceitar essas estimativas ajustadas como o verdadeiro tamanho dos
auto-controle: Tem a evidência de esgotamento ego sido superestimada? Fronteiras em
efeitos, recomendamos em vez de um esforço de pesquisa colaborativa preregistered
Psicologia, 5, 823. http: //dx.doi
e meta-análise prospectiva. Neste esforço de pesquisa, o pré-registo e colaboração . org / 10,3389 / fpsyg.2014.00823
serão ambos indispensável. Na ausência de pré-inscrição e colaboração, os dois Conselho de Comunicação e Mídia. (2009). Da Academia Americana de Pediatria: a
campos bem definidos de defensores e céticos podem cada resultados achar que violência política declaração-Media. Pediatria,
124, 1495-1503.
EFEITOS superestimada de jogos violentos 773

DeWall, CN, e Bushman, BJ (2009). Quente sob o colar em um ambiente morno: palavras Ferguson, CJ, & Kilburn, J. (2010). Muito barulho por nada: O misestimation e
associadas com o aumento da temperatura quente pensamentos agressivos e percepções overinterpretation de efeitos de jogos de vídeo violentos em nações orientais e
ocidentais: Comente sobre Anderson et al. (2010).
hostis. Journal of Experimental Psicologia Social, de 45 anos, 1045-1047. http://dx.doi.org/10.1016/j.jesp.2009
Psychological Bulletin, 136, 174-178. http://dx.doi.org/10.1037/ a0018566
.05,003
Duval, S., & Tweedie, R. (2000). Aparar e preencher: Um método simples baseado no funil de-lote de Furuya-Kanamori, L., e Doi, SAR (2016). Angry Birds, crianças com raiva, e meta-analistas
teste e o ajuste para polarização da publicação na meta-análise. irritados: Uma reanálise. Perspectivas sobre Psychological Science, 11, 408-414. http://dx.doi.org/10.1177/1745691
Biometrics, 56, 455-463. http://dx.doi.org/10.1111/j.0006-341X.2000
. 00455.x Gervais, WM (2015, 25 de junho). Colocando PET-PEESE à prova [postar log Web].
Egger, M., Smith, GD, Schneider, M., & Minder, C. (1997). Viés na meta-análise detectado Retirado de http://willgervais.com/blog/2015/6/25/putting-petpeese-to-the-test-1
por um teste simples, gráfica. BMJ, 315, 629-634.
http://dx.doi.org/10.1136/bmj.315.7109.629 Graybill, D., Kirsch, JR, & Esselman, ED (1985). Efeitos de jogar violenta contra
Elson, M., Bruer, J., Van Looy, J., Kneer, J., & Quandt, T. (2013). Comparar maçãs e videogames não violentos na ideação agressivo de crianças agressivas e não
laranjas? Evidência para ritmo de ação como um confundem na investigação sobre agressivas. Child Study Journal, 15, 199-
jogos digitais e agressão. Psicologia da Popular meios de cultura. Avançar publicação 205.
online. http://dx.doi.org/10 Greitemeyer, T., & Mugge, DO (2014). jogos de vídeo que afetam os resultados sociais: Uma
. 1037 / ppm0000010 revisão meta-analítica dos efeitos do jogo de vídeo violentos e pró-social. Personalidade e
Elson, M., & Ferguson, CJ (2014). Vinte e cinco anos de pesquisa sobre a violência nos Psicologia Social Bulletin, 40, 578-
Este documento é protegido pela American Psychological Association ou uma de suas editoras aliadas. Este artigo destina-se

jogos digitais e agressão: A evidência empírica, perspectivas e um debate extraviou. European 589. http://dx.doi.org/10.1177/0146167213520459
Psychologist, 19, 33-46. Guan, M., e Vandekerckhove, J. (2016). Uma abordagem de Bayesian para a atenuação de viés de
http://dx.doi.org/10.1027/1016-9040/a000147 publicação. Psychonomic Bulletin & Review, 23, 74-86.
Elson, M., Mohseni, MR, Breuer, J., Scharkow, M., & Quandt, T. (2014). Imprensa CRTT para http://dx.doi.org/10.3758/s13423-015-0868-6
medir o comportamento agressivo: O uso não padronizado da tarefa o tempo de reação Hagger, MS, & Chatzisarantis, NLD (2016). A multi-laboratório preregistered replicação do
efeito ego-esgotamento. Perspectivas sobre Psychological Science, 11, 546-573. http://dx.doi.org/10.1177/17
competitiva em pesquisa agressão. Avaliação Psicológica, 26, 419-432. http://dx.doi.org/10.1037/a0035569
652873
Elson, M., & Quandt, T. (2014). jogos digitais em experimentos de laboratório: Controlando um
exclusivamente para o uso pessoal do usuário individual e não deve ser amplamente divulgadas.

estímulo complexo através modding. Psicologia da Popular meios de cultura. Avançar Higgins, JPT (2008). Comentário: Heterogeneidade na meta-análise deve ser esperado e
publicação online. http://dx.doi.org/10 devidamente quantificado. International Journal of Epidemiology, 37, 1158-1160. http://dx.doi.org/10.1093/ije
. 1037 / ppm0000033
Engelhardt, CR, Bartholow, BD, e Saults, JS (2011). jogos de vídeo violentos e não violentos Higgins, JPT, & Green, S. (Eds.). (2011). Manual Cochrane de revisões sistemáticas de
afetam diferencialmente agressão física para indivíduos de alto vs. baixo em raiva intervenções ( Vol. Versão 5.1.0 [atualizado em março de 2011]). A Colaboração
dispositional. O comportamento agressivo, 37, Cochrane. Retirado de http: // www. cochrane-handbook.org
539-546. http://dx.doi.org/10.1002/ab.20411
Engelhardt, CR, Hilgard, J., & Bartholow, BD (2015). A exposição aguda a difíceis (mas não Huesmann, LR (2010). Pregar o caixão fechou em dúvidas de que os jogos de vídeo violentos
violentas) jogos de vídeo dysregulates controle cognitivo. estimulam a agressão: Comment on Anderson et al. (2010).
Computadores em Comportamento Humano, 45, 85-92. http://dx.doi.org/10.1016/j Psychological Bulletin, 136, 179-181. http://dx.doi.org/10.1037/ a0018567
. chb.2014.11.089
Engelhardt, CR, Mazurek, MO, Hilgard, J., Clark, KE, & Rouder, Ioannidis, JPA, & Trikalinos, TA (2007). Um teste exploratório para um excesso de resultados
JN (2016). Um teste do modelo geral de agressão: Os efeitos da exposição videogame significativos. Clinical Trials, 4, 245-253. http: //dx.doi
violento em adultos com e sem Transtorno do Espectro do Autismo. [ Manuscrito em . org / 10,1177 / 1740774507079441
preparação]. Ioannidis, JPA, Trikalinos, TA, e Zintzaras, E. (2006). Extrema homogeneidade entre os
Engelhardt, CR, Mazurek, MO, Hilgard, J., Rouder, JN, Bartholow &, BD (2015). Efeitos estudos em meta-análises podem oferecer informações úteis. Journal of Clinical
da exposição violenta-video-game sobre o comportamento agressivo, acessibilidade Epidemiology, 59, 1023-1032. http: //dx.doi
agressiva-pensamento, e agressivo afetar entre adultos com e sem transtorno do . org / 10.1016 / j.jclinepi.2006.02.013
espectro do autismo. James, W. (1890). Os princípios da psicologia ( Vol. 2). New York, NY: Holt. http://dx.doi.org/10.1037/11059-00
Psychological Science, 26, 1187-1200. http://dx.doi.org/10.1177/ 0956797615583038
Johnson, DJ, Cheung, F., & Donnellan, MB (2014). Influi limpeza julgamentos morais?
Etchells, PJ, Gage, SH, Rutherford, AD, & MUNAFO, MR (2016). estudo prospectivo de Uma replicação directa de Schnall, Benton, e Harvey (2008). Psicologia Social, de 45
uso de jogos de vídeo em crianças e posterior transtorno de conduta e dados de anos, 209-215. http://dx.doi.org/10
depressão usando do Estudo Longitudinal Avon de Pais e Filhos. PLoS ONE, 11, e0147732. . 1027 / 1864-9335 / a000186
http: //dx.doi Kerr, NL (1998). Harking: Partindo da hipótese após os resultados são conhecidos.
. org / 10.1371 / journal.pone.0147732 Personalidade e Psicologia Social Review, 2, 196-217. http: //dx.doi
Ferguson, CJ (2007). Evidência para viés de publicação no vídeo game literatura efeitos . org / 10,1207 / s15327957pspr0203_4
violência: Uma revisão meta-analítica. Agressão e comportamento violento, 12, 470-482. http://dx.doi.org/10.1016/j.avb.2007.01
Kneer, J., Elson, M., e Knapp, F. (2016). Combater o fogo com arco-íris: Os efeitos da
violência exibida, dificuldade e desempenho em jogos digitais sobre afetar, agressão e
. 001 excitação fisiológica. Computadores em Comportamento Humano, 54, 142-148. http://dx.doi.org/10.1016/j.chb.201
Ferguson, CJ (2015). Não aves raiva fazer para as crianças com raiva? Uma meta-análise de
influências de jogos de vídeo sobre a agressão de crianças e adolescentes, a saúde mental, . 034

comportamento pró-social e desempenho acadêmico. Perspectivas sobre Psychological Krahe, B. (no prelo). os efeitos da mídia violentos contra a agressão: Um comentário de uma
Science, 10, 646-666. http: // dx perspectiva transcultural. Análise das Questões Sociais e Políticas Públicas. http://dx.doi.org/10.1111/asap.12107
. doi.org/10.1177/1745691615592234
Ferguson, CJ, & Kilburn, J. (2009). Os riscos de saúde pública de violência na mídia: Uma Lakens, D., Hilgard, J., & Staaks, J. (2016). Na reprodutibilidade dos meta-análises:
revisão meta-analítica. The Journal of Pediatrics, 154, 759- Seis recomendações práticas. psicologia BMC, 4, 24.
763. http://dx.doi.org/10.1016/j.jpeds.2008.11.033 http://dx.doi.org/10.1186/s40359-016-0126-3
774 Hilgard, ENGELHARDT, E ROUDER

Lau, J., Ioannidis, APP, Terrin, N., Schmid, CH, & Olkin, I. (2006). O caso da trama jogos de computador. Personalidade e diferenças individuais, 41, 381-392.
funil enganosa. BMJ, 333, 597-600. http: // dx http://dx.doi.org/10.1016/j.paid.2006.02.006
. doi.org/10.1136/bmj.333.7568.597 Simonsohn, U., Nelson, LD, e Simmons, JP (2014A). P-curva: A chave para o
Matsuzaki, N., Watanabe, H., & Satou, K. (2004). Terebigemu não kougekisei ni kansuru arquivo-gaveta. Journal of Experimental Psychology: General, 143,
kyouikushinrigakuteki Kenkyu [psicologia educacional da agressividade no jogo de 534-547. http://dx.doi.org/10.1037/a0033242
vídeo]. Boletim da Faculdade de Educação da Universidade de Ehime, 51, 45-52. Simonsohn, U., Nelson, LD, e Simmons, JP (2014b). P-curva e efeito tamanho: Corrigindo para a
polarização publicação utilizando apenas os resultados significativos.
Matzke, D., Nieuwenhuis, S., van Rijn, H., Slagter, HA, van der Molen, Perspectivas sobre Psychological Science, 9, 666-681. http://dx.doi.org/
MW, e Wagenmakers, E.-J. (2015). O efeito dos movimentos oculares horizontais em 10,1177 / 1745691614553988
recordação livre: Uma colaboração contraditório preregistered. Stanley, TD, e Doucouliagos, H. (2014). aproximações de regressão-meta para reduzir viés
Journal of Experimental Psychology: General, 144, e1-e15. http: // dx selecção publicação. Métodos de investigação Synthesis,
. doi.org/10.1037/xge0000038 5, 60-78. http://dx.doi.org/10.1002/jrsm.1095
McCarthy, RJ (2014). Fechar tentativas de replicação do efeito percepção priminghostile Sterne, JAC, Gavaghan, D., & Egger, M. (2000). Publicação e viés relacionado na
calor. Journal of Experimental Social Psychology, meta-análise: poder dos testes estatísticos e prevalência na literatura. Journal of Clinical
54, 165-169. http://dx.doi.org/10.1016/j.jesp.2014.04.014 Epidemiology, 53, 1119-1129. http: // dx
Moreno, SG, Sutton, AJ, Ades, AE, Stanley, TD, Abrams, KR, . doi.org/10.1016/S0895-4356(00)00242-0
Peters, JL, & Cooper, NJ (2009). Avaliação de métodos baseados em regressão para ajustar Lágrima, MJ, & Nielsen, M. (2014). videogames e comportamento pró-social: Um estudo sobre
para a polarização publicação através de um estudo de simulação abrangente. BMC Medical os efeitos da não-violência, violento e ultra-violento jogo.
Este documento é protegido pela American Psychological Association ou uma de suas editoras aliadas. Este artigo destina-se

Research Methodology, 9, 2. http: //dx.doi Computadores em Comportamento Humano, 41, 8-13. http://dx.doi.org/10.1016/j
. org / 10.1186 / 1471-2288-9-2 . chb.2014.09.002
Morey, RD (2013). O teste de consistência não-and can not-entregar o que é anunciado: Terrin, N., Schmid, CH, Lau, J., & Olkin, I. (2003). Ajustar para polarização da publicação na
Um comentário sobre Francis (2013). Journal of Psychology Matemática, 57, 180-183. http://dx.doi.org/10.1016/j.jmp
presença de heterogeneidade. Estatísticas em Medicina,
22, 2113-2126. http://dx.doi.org/10.1002/sim.1461
. 2013.03.004 Urashima, M., & Suzuki, K. (2003). Konpyuuta GEMU ga Kodomo no Koudou ni oyobosu
O'Boyle, EH, Jr., Banks, GC, & Gonzalez-mula, E. (2014). O efeito crisálida: Como eikyo [os efeitos de brincar com jogos de computador sobre o comportamento das
feio resultados iniciais metamorfosear em belos artigos. Journal of Management. Avançar crianças]. Journal of Saúde da Criança, 50, 50-56. Van Aert, RCM, Wicherts, JM, & van
exclusivamente para o uso pessoal do usuário individual e não deve ser amplamente divulgadas.

publicação online. http: // dx Assen, MALM (no prelo). Realização de meta-análises baseadas em valores de p:
. doi.org/10.1177/0149206314527133 Reservas e recomendações para a aplicação de p-uniforme e p-curva. Perspectivas sobre
Panee, CD, & Ballard, ME (2002). Alta versus baixa priming agressivo durante o treinamento de Psychological Science. Retirado de http://www.metaresearch.nl/wpcontent/uploads/2016/04/Preprint_VanAert_Wi
vídeo-game: Efeitos sobre a ação violenta durante o jogo, a hostilidade, a frequência cardíaca
e pressão arterial. Journal of Applied Social Psychology, 32, 2.458-2.474. http://dx.doi.org/10.1111/j.1559-1816
Van Assen, Malm van Aert, RCM, & Wicherts, JM (2015). Meta-análise utilizando distribuições
. 2002.tb02751.x de tamanho de efeito de apenas estudos estatisticamente significativas. Métodos
Przybylski, AK, Deci, EL, Rigby, CS, e Ryan, RM (2014). Competence-impedindo jogos psicológicos, 20, 293-309. http://dx.doi.org/10
eletrônicos e sentimentos agressivos dos jogadores, pensamentos e comportamentos. Journal . 1037 / met0000025
of Personality and Social Psychology, 106, 441-457. http://dx.doi.org/10.1037/a0034820 Vevea, JL, & Hedges, LV (1995). Um modelo linear geral para estimar o tamanho do efeito na
presença de viés de publicação. Psychometrika, 60,
Riley, RD, Lambert, PC, & Abo-Zaid, G. (2010). Meta-análise de dados individuais 419-435. http://dx.doi.org/10.1007/BF02294384
participante: Fundamentação, conduta e relatórios. BMJ, 340, Viechtbauer, W. (2010). Realização de meta-análises em R com o pacote metafor. Journal
C221. http://dx.doi.org/10.1136/bmj.c221 of Statistical Software, 36, 1-48. http://dx.doi.org/10
Rohrer, D., Pashler, H., e Harris, RC (2015). Não lembretes sutis de dinheiro mudar pontos de . 18637 / jss.v036.i03
Willoughby, T., Adachi, PJC, & Good, M. (2012). Um estudo longitudinal da associação
vista políticos das pessoas? Journal of Experimental Psychology: General, 144, e73-e85. http://dx.doi.org/10.1037/xge0000058
entre o jogo de vídeo violentos e agressão entre adolescentes. Developmental
Shanks, DR, Newell, BR, Lee, EH, Balakrishnan, D., Ekelund, L., Cenac, Z.,. . . Moore, C. Psychology, 48, 1044-1057. http: //
(2013). Priming comportamento inteligente: Um fenômeno indescritível. PLoS ONE, 8, e56515. dx.doi.org/10.1037/a0026046
http://dx.doi.org/10.1371/ journal.pone.0056515

Sigurdsson, JF, Gudjonsson, GH, Bragason, AV, Kristjansdottir, E., & Sigfusdottir, ID Recebeu 08 novembro de 2015 Revisão

(2006). O papel da cognição violento na relação entre personalidade e o recebeu 07 de julho de 2016
envolvimento em filmes violentos e Aceito 26 de julho de 2016

Anda mungkin juga menyukai