{"id":4072,"date":"2013-09-20T13:05:28","date_gmt":"2013-09-20T16:05:28","guid":{"rendered":"http:\/\/scienceblogs.com.br\/socialmente\/?p=4072"},"modified":"2013-09-20T13:05:28","modified_gmt":"2013-09-20T16:05:28","slug":"mas-isso-funciona-mesmo","status":"publish","type":"post","link":"https:\/\/www.blogs.unicamp.br\/socialmente\/2013\/09\/20\/mas-isso-funciona-mesmo\/","title":{"rendered":"Mas isso funciona mesmo?"},"content":{"rendered":"<div id=\"attachment_4106\" style=\"width: 810px\" class=\"wp-caption aligncenter\"><a href=\"https:\/\/www.blogs.unicamp.br\/socialmente\/wp-content\/uploads\/sites\/238\/2013\/09\/meta-analysis.jpg\" data-rel=\"lightbox-image-0\" data-rl_title=\"\" data-rl_caption=\"\" title=\"\"><img fetchpriority=\"high\" decoding=\"async\" aria-describedby=\"caption-attachment-4106\" class=\" wp-image-4106\" alt=\"examining documents\" src=\"https:\/\/www.blogs.unicamp.br\/socialmente\/wp-content\/uploads\/sites\/238\/2013\/09\/meta-analysis.jpg\" width=\"800\" height=\"600\" srcset=\"https:\/\/www.blogs.unicamp.br\/socialmente\/wp-content\/uploads\/sites\/238\/2013\/09\/meta-analysis.jpg 800w, https:\/\/www.blogs.unicamp.br\/socialmente\/wp-content\/uploads\/sites\/238\/2013\/09\/meta-analysis-300x225.jpg 300w, https:\/\/www.blogs.unicamp.br\/socialmente\/wp-content\/uploads\/sites\/238\/2013\/09\/meta-analysis-768x576.jpg 768w, https:\/\/www.blogs.unicamp.br\/socialmente\/wp-content\/uploads\/sites\/238\/2013\/09\/meta-analysis-620x465.jpg 620w, https:\/\/www.blogs.unicamp.br\/socialmente\/wp-content\/uploads\/sites\/238\/2013\/09\/meta-analysis-200x150.jpg 200w\" sizes=\"(max-width: 800px) 100vw, 800px\" \/><\/a><p id=\"caption-attachment-4106\" class=\"wp-caption-text\">Como saber se um tratamento \u00e9 realmente eficaz?<\/p><\/div>\n<p style=\"text-align: justify\">Como saber se um tratamento m\u00e9dico realmente cura uma doen\u00e7a? Ou saber em que n\u00edvel <a href=\"http:\/\/scienceblogs.com.br\/socialmente\/2013\/08\/no-banco-dos-reus-reflexoes-sobre-o-impacto-de-jogos-digitais-no-comportamento-humano\/\" target=\"_blank\" rel=\"noopener noreferrer\">jogos eletr\u00f4nicos s\u00e3o capazes de influenciar o comportamento agressivo das pessoas<\/a>? Quando cientistas tentam responder a essas perguntas, normalmente s\u00e3o feitas diversas pesquisas ao redor do mundo. Alguns encontram que &#8220;sim&#8221;, o tratamento m\u00e9dico realmente parece curar a doen\u00e7a, enquanto outros encontram que \u201cn\u00e3o\u201d, o tratamento tem um efeito muito pequeno na melhora dos pacientes, s\u00f3 funciona para um grupo espec\u00edfico de pacientes ou n\u00e3o tem efeito nenhum.<\/p>\n<p style=\"text-align: justify\">Se alguns estudos concluem que &#8220;sim&#8221; e outros que &#8220;n\u00e3o&#8221;, algo comum na ci\u00eancia, como podemos chegar a uma conclus\u00e3o sobre se, por exemplo, um tratamento m\u00e9dico \u00e9 realmente eficaz no tratamento de uma doen\u00e7a? Considerando as importantes implica\u00e7\u00f5es pr\u00e1ticas que uma conclus\u00e3o como essa pode gerar (<i>e.g.<\/i> implanta\u00e7\u00e3o do tratamento na rede p\u00fablica, gastos do governo), seria importante que tiv\u00e9ssemos algum m\u00e9todo confi\u00e1vel em m\u00e3os para enxergar o que todo um conjunto de estudos tem a dizer sobre a efic\u00e1cia de um tratamento (por exemplo, a efic\u00e1cia de antidepressivos no tratamento da depress\u00e3o). Felizmente, a estat\u00edstica, a ci\u00eancia do significado dos dados e de como us\u00e1-los para entender como as coisas funcionam, disp\u00f5e de uma poderosa ferramenta para avaliar o que um conjunto maior de evid\u00eancias produzidas em diferentes estudos mostra. Essa ferramenta se chama <i>meta-an\u00e1lise<\/i>. Agora calma, respire funde e n\u00e3o pare de ler esse texto ainda! Prometo que voc\u00ea n\u00e3o ver\u00e1 nenhuma equa\u00e7\u00e3o aqui! Eu sei que o nome n\u00e3o \u00e9 muito atraente&#8230; mas a ideia b\u00e1sica n\u00e3o \u00e9 dif\u00edcil de entender e a sua utilidade \u00e9 t\u00e3o grande que vale a pena tentar entender pelo menos um pouco do que \u00e9 uma meta-an\u00e1lise. Quem sabe depois disso voc\u00ea mesmo n\u00e3o pense em fazer uma meta-an\u00e1lise (ou, mais provavelmente, cortar os seus pulsos) sobre algum assunto que te interessa!<\/p>\n<p style=\"text-align: justify\"><!--more--><\/p>\n<p style=\"text-align: justify\">Uma meta-an\u00e1lise pode ser entendida como uma \u201can\u00e1lise das an\u00e1lises\u201d, literalmente. Sim, \u00e9 s\u00f3 isso, eu disse que n\u00e3o do\u00eda! Ela consiste em uma an\u00e1lise das an\u00e1lises feitas em diferentes estudos visando identificar o que esses estudos mostram sobre a associa\u00e7\u00e3o entre duas ou mais vari\u00e1veis. Com essa t\u00e9cnica, podemos comparar e sintetizar o que esses estudos indicam quando s\u00e3o considerados de maneira conjunta. Para isso, normalmente uma meta-an\u00e1lise se foca em analisar a for\u00e7a de associa\u00e7\u00e3o entre duas ou mais vari\u00e1veis, algo conhecido como <i>tamanho de efeito<\/i>, encontrada nos estudos realizados sobre algum assunto. \u00c9 por considerar o que um conjunto de evid\u00eancias<sup>1<\/sup> tem a dizer sobre uma rela\u00e7\u00e3o entre vari\u00e1veis, em oposi\u00e7\u00e3o a considerar o que apenas um estudo espec\u00edfico diz, que a meta-an\u00e1lise \u00e9 uma ferramenta t\u00e3o importante e que nos permite chegar a conclus\u00f5es mais razo\u00e1veis sobre a efic\u00e1cia de tratamentos, a rela\u00e7\u00e3o entre jogos eletr\u00f4nicos e viol\u00eancia ou a rela\u00e7\u00e3o entre religiosidade e moralidade, por exemplo.<\/p>\n<p style=\"text-align: justify\">A realiza\u00e7\u00e3o de uma meta-an\u00e1lise envolve um planejamento muito detalhado e cuidadoso, j\u00e1 que para comparar diferentes estudos \u00e9 necess\u00e1rio que haja boas justificativas expl\u00edcitas \u2013 voc\u00ea n\u00e3o vai querer, por exemplo, misturar alhos com bugalhos, certo? Depois de uma defini\u00e7\u00e3o dos crit\u00e9rios que ser\u00e3o usados para selecionar os estudos que ser\u00e3o considerados pela meta-an\u00e1lise, \u00e9 feita a busca de tais estudos e ent\u00e3o o registro das informa\u00e7\u00f5es mais importantes daquele estudo, tais como os resultados encontrados, bem como informa\u00e7\u00f5es que podem ajudar a explicar as diferen\u00e7as nos resultados encontrados em diferentes estudos, tais como o pa\u00eds onde a pesquisa foi feita, a \u00e9poca e os m\u00e9todos usados \u2013 algo conhecido como <i>vari\u00e1veis moderadoras<\/i>. A an\u00e1lise de tais dados pode permitir uma compreens\u00e3o mais profunda da magnitude de associa\u00e7\u00e3o entre as vari\u00e1veis de interesse, bem como das vari\u00e1veis moderadoras que explicam a varia\u00e7\u00e3o de resultados entre os estudos, o que pode ser \u00fatil para o pr\u00f3prio desenvolvimento futuro daquela \u00e1rea.<\/p>\n<p style=\"text-align: justify\"><span style=\"float: left;padding: 5px\"><a href=\"http:\/\/www.researchblogging.org\"><img decoding=\"async\" class=\"alignleft\" style=\"border: 0\" alt=\"ResearchBlogging.org\" src=\"http:\/\/www.researchblogging.org\/public\/citation_icons\/rb2_large_gray.png\" width=\"70\" height=\"85\" \/><\/a><\/span>H\u00e1 ainda a possibilidade de realizar uma \u201cmeta-an\u00e1lise das meta-an\u00e1lises\u201d, ou seja, uma meta-an\u00e1lise na qual as informa\u00e7\u00f5es prim\u00e1rias usadas s\u00e3o as obtidas a partir de meta-an\u00e1lises ao inv\u00e9s de estudos individuais. Como voc\u00ea j\u00e1 pode ter conclu\u00eddo, esse tipo de estudo nos permite chegar a conclus\u00f5es ainda mais interessantes, pois considera um conjunto ainda maior de dados sobre determinado fen\u00f4meno. Um exemplo disso foi uma <a href=\"http:\/\/scienceblogs.com.br\/socialmente\/2011\/05\/acupuntura-eficacia-e-riscos\/\">meta-an\u00e1lise das meta-an\u00e1lises sobre efic\u00e1cia da acupuntura<\/a>, publicada em 2011 na revista <i>Pain<\/i> (<a href=\"http:\/\/scienceblogs.com.br\/socialmente\/2011\/05\/acupuntura-eficacia-e-riscos\/\">escrevi um texto mais detalhado sobre essa meta-an\u00e1lise aqui<\/a>). Esse estudo indicou que, quando os dados de 57 meta-an\u00e1lises s\u00e3o considerados em conjunto (o que significa considerar os dados de MUITOS estudos individuais), a acupuntura demonstra pouca e inconsistente efic\u00e1cia para diferentes casos (<i>e.g.<\/i> dor cr\u00f4nica).<\/p>\n<p style=\"text-align: justify\">Obviamente, como toda ferramenta usada na ci\u00eancia, a meta-an\u00e1lise tem as suas vantagens, desvantagens e limita\u00e7\u00f5es. Ela nem sempre ser\u00e1 \u00fatil. Problemas metodol\u00f3gicos b\u00e1sicos com os estudos de uma \u00e1rea ir\u00e3o se refletir na qualidade da informa\u00e7\u00e3o que a meta-an\u00e1lise ser\u00e1 capaz de produzir \u2013 algo representado pela famosa express\u00e3o \u201c<i>garbage in garbage out\u201d<\/i> \u2013 se voc\u00ea inserir lixo na meta-an\u00e1lise, vai encontrar lixo. Em situa\u00e7\u00f5es onde al\u00e9m desse problema o fen\u00f4meno de interesse \u00e9 estudado por um grupo muito pequeno de pesquisadores, os resultados de uma meta-an\u00e1lise seriam provavelmente muito enviesados. As meta-an\u00e1lises realizadas sobre a exist\u00eancia de supostos fen\u00f4menos \u201cparapsicol\u00f3gicos\u201d, por exemplo, incluem diversos estudos com problemas metodol\u00f3gicos s\u00e9rios (<i>e.g.<\/i> aus\u00eancia de informa\u00e7\u00f5es cruciais para replica\u00e7\u00e3o, aus\u00eancia de grupos-controle) e foram conduzidos por um grupo restrito de pesquisadores. Nesse caso, diferentes meta-an\u00e1lises chegaram a conclus\u00f5es bem diferentes sobre o fen\u00f4meno. Nesses casos, o mais indicado seria o planejamento cuidadoso e a condu\u00e7\u00e3o de estudos de replica\u00e7\u00e3o por laborat\u00f3rios independentes (leia mais sobre isso <a href=\"http:\/\/scienceblogs.com.br\/socialmente\/2013\/03\/replicacao-na-psicologia-uma-entrevista-com-brian-nosek\/\" target=\"_blank\" rel=\"noopener noreferrer\">aqui<\/a>,\u00a0<a href=\"http:\/\/scienceblogs.com.br\/socialmente\/2012\/06\/psicologia-acordando-para-ciencia-aberta\/\" target=\"_blank\" rel=\"noopener noreferrer\">aqui<\/a>\u00a0e <a href=\"http:\/\/scienceblogs.com.br\/socialmente\/2012\/10\/adversarios-precisam-cooperar\/\" target=\"_blank\" rel=\"noopener noreferrer\">aqui<\/a>). Outra dificuldade se refere a vieses de publica\u00e7\u00e3o que favorecem que determinados tipos de estudos se tornem p\u00fablicos (estudos que alcan\u00e7am, por exemplo, a famosa \u201csignific\u00e2ncia estat\u00edstica\u201d). Sem uma busca sistem\u00e1tica por dados n\u00e3o publicados, por exemplo, uma meta-an\u00e1lise pode produzir um retrato muito enviesado da \u00e1rea.<\/p>\n<p style=\"text-align: justify\">Apesar de vastamente usada e valorizada ao redor do mundo em diferentes \u00e1reas da ci\u00eancia, o uso da meta-an\u00e1lise por pesquisadores brasileiros ainda \u00e9 t\u00edmido e raro, principalmente em \u00e1reas como as ci\u00eancias humanas e sociais. Se a pr\u00f3pria estat\u00edstica \u00e9 muitas vezes desprezada por essas \u00e1reas, que dir\u00e1 a meta-an\u00e1lise. Certamente quem perde com isso s\u00e3o as pr\u00f3prias \u00e1reas de conhecimento e as gera\u00e7\u00f5es de novos pesquisadores que s\u00e3o privados de conhecer tais ferramentas poderosas ao longo de suas forma\u00e7\u00f5es, muitas vezes, mais focadas na socializa\u00e7\u00e3o de ideologias e linhas de pensamento defendidas por autoridades filos\u00f3ficas do que em conhecer a diversidade de m\u00e9todos, t\u00e9cnicas e tecnologias que existem hoje em dia dispon\u00edveis para pesquisadores das ci\u00eancias humanas e sociais.<\/p>\n<p style=\"text-align: justify\"><strong>Nota de rodap\u00e9<\/strong><\/p>\n<p style=\"text-align: justify\"><sup>1<\/sup>Quando me refiro a \u201cum conjunto de dados\u201d, significa que uma meta-an\u00e1lise pode ser feita usando-se como base desde os dados presentes em dois estudos at\u00e9 os presentes em duzentos estudos ou mais.<\/p>\n<p style=\"text-align: justify\"><strong>Refer\u00eancias<\/strong><\/p>\n<p style=\"text-align: justify\"><span style=\"line-height: 1.6em\">Bem, D. J. &amp; Honorton, C. (1994). &#8220;Does psi exist?&#8221;<\/span><span style=\"line-height: 1.6em\">\u00a0<\/span><i style=\"line-height: 1.6em\">Psychological Bulletin, Vol. 115<\/i><span style=\"line-height: 1.6em\">, No. 1, 4-18.<\/span><\/p>\n<p style=\"text-align: justify\">Card, N. A. (2012). <em>Applied meta-analysis for social science research<\/em>. Guilford: New York.<\/p>\n<p style=\"text-align: justify\">Ernst, E., Lee, M., &amp; Choi, T. (2011). Acupuncture: Does it alleviate pain and are there serious risks? A review of reviews.\u00a0<i>PAIN, 152<\/i> (4), 755-764 DOI: 10.1016\/j.pain.2010.11.004<\/p>\n<p style=\"text-align: justify\">Milton, J. and R.Wiseman (1999). Does psi exist? Lack of replication of an anomalous process of information transfer.\u00a0<i>Psychological Bulletin, 125<\/i>, 387-391.<\/p>\n<p style=\"text-align: justify\"><span class=\"Z3988\" title=\"ctx_ver=Z39.88-2004&amp;rft_val_fmt=info%3Aofi%2Ffmt%3Akev%3Amtx%3Ajournal&amp;rft.jtitle=Psychological+Bulletin&amp;rft_id=info%3Apmid%2F20565164&amp;rfr_id=info%3Asid%2Fresearchblogging.org&amp;rft.atitle=Meta-analysis+of+free-response+studies%2C+1992-2008%3A+Assessing+the+noise+reduction+model+in+parapsychology.&amp;rft.issn=0033-2909&amp;rft.date=2010&amp;rft.volume=136&amp;rft.issue=4&amp;rft.spage=471&amp;rft.epage=85&amp;rft.artnum=&amp;rft.au=Storm+L&amp;rft.au=Tressoldi+PE&amp;rft.au=Di+Risio+L&amp;rfe_dat=bpr3.included=1;bpr3.tags=Psychology%2CAbnormal+Psychology%2C+Quantitative+Psychology\">Storm L, Tressoldi PE, &amp; Di Risio L (2010). Meta-analysis of free-response studies, 1992-2008: Assessing the noise reduction model in parapsychology. <span style=\"font-style: italic\">Psychological Bulletin, 136<\/span> (4), 471-85 PMID: <a href=\"http:\/\/www.ncbi.nlm.nih.gov\/pubmed\/20565164\" rev=\"review\">20565164<\/a><\/span><\/p>\n<p>&#8212;<\/p>\n<p><strong>Fonte:<\/strong> <a href=\"http:\/\/www.bulevoador.com.br\/\" target=\"_blank\" rel=\"noopener noreferrer\">Peri\u00f3dico Bule<\/a><\/p>\n<p><strong>Autor<\/strong>: Andr\u00e9 Rabelo<\/p>\n","protected":false},"excerpt":{"rendered":"<p>Como saber se um tratamento m\u00e9dico realmente cura uma doen\u00e7a? Ou saber em que n\u00edvel jogos eletr\u00f4nicos s\u00e3o capazes de influenciar o comportamento agressivo das pessoas? Quando cientistas tentam responder a essas perguntas, normalmente s\u00e3o feitas diversas pesquisas ao redor do mundo. Alguns encontram que &#8220;sim&#8221;, o tratamento m\u00e9dico realmente parece curar a doen\u00e7a, enquanto [&hellip;]<\/p>\n","protected":false},"author":494,"featured_media":4106,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"_monsterinsights_skip_tracking":false,"pgc_sgb_lightbox_settings":"","_vp_format_video_url":"","_vp_image_focal_point":[],"footnotes":""},"categories":[3,16],"tags":[300,467],"class_list":["post-4072","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-ciencia","category-psicologia","tag-estatistica","tag-meta-analise"],"jetpack_featured_media_url":"https:\/\/www.blogs.unicamp.br\/socialmente\/wp-content\/uploads\/sites\/238\/2013\/09\/meta-analysis.jpg","_links":{"self":[{"href":"https:\/\/www.blogs.unicamp.br\/socialmente\/wp-json\/wp\/v2\/posts\/4072","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www.blogs.unicamp.br\/socialmente\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.blogs.unicamp.br\/socialmente\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.blogs.unicamp.br\/socialmente\/wp-json\/wp\/v2\/users\/494"}],"replies":[{"embeddable":true,"href":"https:\/\/www.blogs.unicamp.br\/socialmente\/wp-json\/wp\/v2\/comments?post=4072"}],"version-history":[{"count":0,"href":"https:\/\/www.blogs.unicamp.br\/socialmente\/wp-json\/wp\/v2\/posts\/4072\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/www.blogs.unicamp.br\/socialmente\/wp-json\/wp\/v2\/media\/4106"}],"wp:attachment":[{"href":"https:\/\/www.blogs.unicamp.br\/socialmente\/wp-json\/wp\/v2\/media?parent=4072"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.blogs.unicamp.br\/socialmente\/wp-json\/wp\/v2\/categories?post=4072"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.blogs.unicamp.br\/socialmente\/wp-json\/wp\/v2\/tags?post=4072"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}