Revisão Sistemática de Literatura e Análise de Conteúdo na Área da Comunicação e Informação: o problema da confiabilidade e como resolvê-lo
Palavras-chave:
Revisão Sistemática de Literatura, Análise de Conteúdo, Confiabilidade, Replicabilidade, MetodologiaResumo
Este trabalho apresenta uma análise da qualidade metodológica das revisões sistemáticas de literatura lusófonas, na área da Comunicação e Informação, utilizando princípios e técnicas desta metodologia comuns à análise de conteúdo, notadamente as relativas à replicabilidade e à confiabilidade. Para isso, 4 bases de indexação foram utilizadas: Web of Science, Scopus, DOAJ e SciELO, sob delimitação temporal específica (2010-2021). Mediante o desenvolvimento de um livro de códigos e realização de testes de confiabilidade, 49 trabalhos foram selecionados e analisados em relação a informações sobre (a) bases utilizadas; (b) termos de busca; (c) delimitação temporal (quantidade de anos); (d) número de trabalhos analisados; (e) critérios de inclusão e/ou exclusão; (f) replicabilidade; (g) confiabilidade. Os principais resultados indicam uma reduzida preocupação dos trabalhos analisados em incorporar ou reportar procedimentos responsivos à confiabilidade (n=3). Por outro lado, a maior parte dos estudos (n=40) mostrou-se, em linhas gerais, replicável. A principal inovação e contribuição desta pesquisa consistiu em propor e testar um procedimento de incremento da confiabilidade das revisões sistemáticas mediante consulta aos autores dos trabalhos revisados. Destaca-se, para além do caráter inovador de tal procedimento, os ganhos epistêmicos por ele trazidos. Discute-se, ao final, as implicações dos resultados para pesquisas futuras, indicando os possíveis ganhos que as estratégias metodológicas concebidas e testadas neste trabalho oferecem para balizar o rigor metodológico das revisões sistemáticas de literatura.
Downloads
Referências
Araújo, G. S.; Seabra, M. O. Elementos fundamentais para o design de jogos digitais com o foco no treino de competências e habilidades de estudantes com transtorno do espectro autista: uma revisão sistemática. Revista Brasileira de Estudos Pedagógicos, v. 102, n. 260, p. 120-147, 2021.
Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Tabela das Áreas de Avaliação. [S. l.]: Capes, 2017. v. 2. Disponível em: https://tinyurl.com/596y94yu. Acesso em: 8 mar. 2022.
Cerrao, N. G.; Jesus, A. F.; Castro, F. F. O método de Revisão Sistemática da Literatura (RS) na área da ciência da informação no Brasil: análise de dados de pesquisa. Informação & Tecnologia, v. 5, n. 1, p. 105-116, 2018. Disponível em: http://hdl.handle.net/20.500.11959/brapci/110396. Acesso em: 21 jul. 2022.
Cooper, H. Research synthesis and meta-analysis: a step-by-step approach. Califórnia: Sage publications, 2015. Freelon, D. ReCal: intercoder reliability calculation as a web service. International Journal of Internet Science, v. 5, n. 1, p. 20-33, 2010.
Gusenbauer, M.; Haddaway, N. R. Which academic search systems are suitable for systematic reviews or meta‐analyses? Evaluating retrieval qualities of Google Scholar, PubMed, and 26 other resources. Research Synthesis Methods, v. 11, n. 2, p. 181-217, 2020.
Jesus, L. M. T.; Simões, J. F. F. L.; Voegeli, D. Comunicação verbal com pacientes inconscientes. Acta Paulista de Enfermagem, v. 26, n. 5, p. 506-513, 2013.
King, G. Replication, replication. PS: Political Science and Politics, n. 28, p. 443-499, 1995.
Kitchenham, B. A. Guidelines for performing systematic literature reviews in software engineering: EBSE Technical Report. Keele: Keele University; Durham: Durham University, 2007. Disponível em: https://tinyurl.com/a62ymbp7. Acesso em: 8 mar. 2022.
Lovejoy, J.; Watson, B. R.; Lacy, S. Assessing the reporting of reliability in published content analyses: 1985-2010.
Communication Methods and Measures, v. 8, n. 3, p. 207-221, 2014.
Machado, H. P. V.; Elias, M. L. G. G. R. Gestão do conhecimento: constituição do campo, temas e perspectivas de pesquisas. TransInformação, v. 32, e200037, 2020. Doi: https://doi.org/10.1590/2318-0889202032e200037.
Medeiros Filho, A. R.; Russo, S. L. Marcas como um indicador: revisão sistemática e análise bibliométrica da literatura. Biblios, n. 71, p. 50-67, 2018.
Mugnaini, R. et al. Panorama da produção científica do Brasil além da indexação: uma análise exploratória da comunicação em periódicos. TransInformação, v. 31, e190033, 2019. Doi: https://doi.org/10.1590/2318-0889201931e190033.
Packer, A. L. O programa SciELO e o acesso aberto via dourada. In: Peruzzo, C. M. K.; Martins, M. L.; Gabrioti, R. Revistas científicas de comunicação ibero-americanas na política de divulgação do conhecimento: tendências, limitações e os desafios de novas estratégias. Braga: Uminho Editora, 2021. p. 29-58. (Coleção Investigação: Ciências Sociais).
Rocha, E. C. et al. A Importância da replicabilidade na Ciência Política: o caso do SIGOBR. Revista Política Hoje, v. 22, n. 2, p. 213-229, 2014.
Sampaio, R. C.; Lycarião, D. Eu quero acreditar! Da importância, formas de uso e limites dos testes de confiabilidade na análise de conteúdo. Revista de Sociologia e Política, v. 26, n. 66, p. 31-47, 2018. Doi: https://doi.org/10.1590/1678-987318266602.
Sampaio, R. C.; Lycarião, D. Análise de conteúdo categorial: manual de aplicação. Brasília: Enap, 2021. (Coleção Metodologias de Pesquisa) Disponível em: https://repositorio.enap.gov.br/bitstream/1/6542/1/Analise_de_Santini, R. M.; Salles, D. O impacto dos algoritmos no consumo de música uma revisão sistemática de literatura. Signos do Consumo, v. 12, n. 1, p. 83-93, 2020.
Souza, L. G. S.; Aganette, E. C. A preservação digital em longo prazo amparada por planos de ações: uma revisão sistemática de literatura. RDBCI: Revista Digital de Biblioteconomia e Ciência da Informação, v. 18, e020027, 2020. Disponível em: https://periodicos.sbu.unicamp.br/ojs/index.php/rdbci/article/view/8661185. Acesso em: 8 set. 2022.
Wilson, D. B. Systematic Coding. In: Cooper, H.; Hedges, L. V.; Valentine, J. C. The handbook of research synthesis and meta-analysis. 2. ed. New York: Russell Sage Foundation, 2009. p.159-176.
Downloads
Publicado
Como Citar
Edição
Seção
Licença
Copyright (c) 2023 Transinformação
Este trabalho está licenciado sob uma licença Creative Commons Attribution 4.0 International License.