This document introduces systematic reviews, covering their objectives, differences from traditional reviews, characteristics, and process. The process involves planning, conducting searches and study selection, assessing quality, extracting and synthesizing data, and documentation. Systematic reviews aim to comprehensively identify and analyze all available research on a topic to summarize evidence and identify gaps.

1. Introdução à
Revisão Sistemática
Rafael Leonardo Vivian
rlvivian.uem [at] gmail [dot] com
Universidade Estadual de Maringá
Departamento de Informática
Laboratório de Desenvolvimento Distribuído de Software

2. Tópicos
● Introdução
● Revisão Sistemática
Objetivos
–
– Revisão Tradicional x Revisão Sistemática
– Características
● Processo de Revisão Sistemática
Planejamento
–
– Condução
– Documentação
● Considerações Finais
Introdução à Revisão Sistemática : Tópicos 02

3. Introdução
● Descoberta e proposta de ideias
● Estado da Arte do tema em questão
● Obter o Estado da Arte:
ler artigos
–
– participar de eventos
– consultar pesquisadores
● Considerar:
– como garantir a aquisição do maior número possível de
textos sobre o tema?
– como foi documentada a busca?
Introdução à Revisão Sistemática : Introdução 03

4. Introdução
● Para apoiar a busca pelo Estado da Arte:
– usar os conceitos da Revisão Sistemática
– medicina e áreas relacionadas fazem uso intensivo de
Revisão Sistemática [Kitchenham, 2004]
Introdução à Revisão Sistemática : Introdução 04

5. Revisão Sistemática
Objetivos [Kitchenham, 2004]
● Identificar, avaliar e interpretar todas as pesquisas
disponíveis em relação a um tema ou assunto específico
● Sumarizar as evidências existentes sobre um tratamento ou
tecnologia
● Identificar lacunas na pesquisa atual
● Fornecer um arcabouço para posicionar novas pesquisas
Introdução à Revisão Sistemática : Objetivos 05

6. Revisão Sistemática
Revisão Tradicional x Revisão Sistemática
● Revisão Tradicional [Pai et al., 2004]:
– métodos para coletar e interpretar estudos são
informais e subjetivos
– tendência para citar seletivamente literatura que
reforça noções preconcebidas
– não descreve a busca, a seleção e a avaliação da
qualidade dos estudos
Introdução à Revisão Sistemática : Revisão Tradicional x Revisão Sistemática 06

7. Revisão Sistemática
Revisão Tradicional x Revisão Sistemática
● Revisão Sistemática [Pai et al., 2004]:
– busca abrangente e exaustiva por estudos primários
seguindo uma questão
– critérios de qualificação claros e reproduzíveis para a
seleção de estudos
– avaliação crítica dos estudos e síntese dos resultados
de acordo com um método explícito e pré-
determinado
Introdução à Revisão Sistemática : Revisão Tradicional x Revisão Sistemática 07

8. Revisão Sistemática
Características [Kitchenham, 2004]
● Começa pela definição do protocolo de revisão
● Baseada sobre uma estratégia de busca definida que visa
detectar o máximo de literatura relevante possível
● Estratégia de busca documentada para que os leitores
possam avaliar o rigor e a completude
● Critérios de inclusão e exclusão explícitos para avaliar cada
estudo
● Especifica a informação a ser obtida de cada estudo
● Pré-requisito para meta-análises quantitativas
Introdução à Revisão Sistemática : Características 08

9. Processo de Revisão Sistemática
[Biolchini et al., 2005]
Introdução à Revisão Sistemática : Processo de Revisão Sistemática 09

10. Processo de Revisão Sistemática
[Kitchenham, 2004]
1) Planejamento:
identificação da necessidade de uma revisão sistemática
–
– desenvolvimento de um protocolo de revisão
2) Condução:
identificação da pesquisa
–
– seleção dos estudos
– avaliação da qualidade dos estudos
– extração dos dados
– síntese dos dados
3) Documentação
Introdução à Revisão Sistemática : Processo de Revisão Sistemática 10

11. Processo de Revisão Sistemática
Planejamento [Kitchenham, 2004]
● A necessidade por uma revisão sistemática:
quais são os objetivos da revisão?
–
● Desenvolvimento de um protocolo de revisão:
– questões de pesquisa: primária e secundárias
– estratégia de busca: termos e fontes
– critérios e procedimentos de seleção dos estudos: inclusão e
exclusão
– procedimentos para avaliação da qualidade dos estudos
– estratégia de extração dos dados
– síntese dos dados extraídos
– cronograma
Introdução à Revisão Sistemática : Planejamento 11

12. Processo de Revisão Sistemática
Planejamento [Kitchenham, 2004]
● Revisar o protocolo:
– IMPORTANTE: o protocolo deve ser revisado por
especialista ou orientador!
Introdução à Revisão Sistemática : Planejamento 12

13. Processo de Revisão Sistemática
Planejamento [Travassos e Biolchini., 2007]
Descrever o problema
Especificar as questões de pesquisa
Desenvolver o Protocolo de Revisão
Avaliar o Protocolo de Revisão
Introdução à Revisão Sistemática : Planejamento 13

14. Processo de Revisão Sistemática
Condução [Kitchenham, 2004]
● Identificação da pesquisa:
– fontes:
– bases de dados eletrônicas
– lista de referências
– revistas (periódicos), relatórios técnicos,
trabalhos em andamento e anais de eventos
– registros de pesquisas
– consulta com especialistas da área
– string de busca com operadores booleanos AND e OR
Introdução à Revisão Sistemática : Condução 14

15. Processo de Revisão Sistemática
Condução [Kitchenham, 2004]
● Identificação da pesquisa:
– documentação do processo de busca
Fonte de Dados Documentação
Base de dados eletrônica Nome da base de dados
Estratégia de busca para cada base de dados
Data da busca
Anos cobertos pela busca
Busca manual em Nome do periódico
periódicos Anos procurados
Alguma questão não procurada
Anais de conferências Título dos anais
Nome da conferência (se for diferente)
Tradução do título (se necessário)
Nome do periódico (se publicado como parte de um periódico)
Esforços para identificar Grupos de pesquisas e pesquisadores contatados (nome e detalhes de contato)
estudos não publicados Web sites de pesquisa procurados (data e URL)
Outras fontes Data de busca/contato
URL
Alguma questão específica relativa à busca
Introdução à Revisão Sistemática : Condução 15

16. Processo de Revisão Sistemática
Condução [Kitchenham, 2004]
● Seleção dos estudos:
– critério de seleção deve ser definido no protocolo
– critérios de inclusão e exclusão devem ser baseados
nas questões de pesquisa
– evitar exclusões baseadas no idioma
– pré-seleção: exclusão baseada sobre o título e resumo
– seleção: exclusão baseada na leitura completa do texto
Introdução à Revisão Sistemática : Condução 16

17. Processo de Revisão Sistemática
Condução [Kitchenham, 2004]
● Avaliação da qualidade dos estudos:
– orientar a interpretação dos resultados de análise e
síntese dos dados
– checklist de fatores que precisam ser avaliados para
cada estudo
– comunicação, rigor, credibilidade e relevância [Dyba
et al., 2007]
Introdução à Revisão Sistemática : Condução 17

18. Processo de Revisão Sistemática
Condução [Kitchenham, 2004]
● Extração dos dados:
– projetar formulários de extração de dados obtidos dos
estudos
– registrar: detalhes de referências e informações que
tratam as questões de pesquisa
– gerenciador de referências bibliográficas:
JabRef (http://jabref.sourceforge.net/)
Introdução à Revisão Sistemática : Condução 18

19. Processo de Revisão Sistemática
Condução [Kitchenham, 2004]
● Síntese dos dados:
– sumarização dos resultados dos estudos incluídos
– síntese descritiva
– síntese quantitativa (meta-análise)
– apresentação em tabelas e gráficos
Introdução à Revisão Sistemática : Condução 19

20. Processo de Revisão Sistemática
Condução [Travassos e Biolchini., 2007]
Identificar as pesquisas relevantes
Selecionar estudos primários
Auferir a qualidade do estudo
Extrair dados requisitados
Síntese dos dados
Introdução à Revisão Sistemática : Condução 20

21. Processo de Revisão Sistemática
Documentação [Kitchenham, 2004]
● É importante transmitir os resultados de uma revisão
sistemática
● A revisão sistemática deve ser relatada em pelo menos duas
formas:
– relatório técnico ou seção de tese/dissertação
– artigo de periódico ou conferência
Introdução à Revisão Sistemática : Documentação 21

22. Processo de Revisão Sistemática
Documentação [Travassos e Biolchini., 2007]
Escrever relatório da Revisão Sistemática
Avaliar relatório
Introdução à Revisão Sistemática : Documentação 22

23. Considerações Finais
● Revisão Sistemática:
mais rigorosa e criteriosa do que revisão tradicional
–
– maior consumo de tempo
● Limitações:
– restrições das máquinas de busca
– esforço de execução da Revisão Sistemática
Introdução à Revisão Sistemática : Considerações Finais 23

24. Referências
Biolchini, J.; Mian, P.G.; Natalli, A.C.C.; Travassos, G.H. (2005). Systematic Review in Software
Engineering. Technical Report RT-ES 679/05, COPPE/UFRJ. Disponível em
http://alarcos.inf-cr.uclm.es/doc/MetoTecInfInf/Articulos/es67905.pdf
Dyba, T.; Dingsoyr, T.; Hanssen, G.K. (2007). Applying Systematic Reviews to Diverse Study
Types: An Experience Report. First International Symposium on Empirical Software Engineering
and Measurement, IEEE. Disponível em
http://ieeexplore.ieee.org/stamp/stamp.jsp?tp=&arnumber=4343750
Kitchenham, B. (2004). Procedures for Performing Systematic Reviews. Joint Technical Report,
TR/SE-0401 and NICTA 0400011T.1, Keele University. Disponível em
http://www.idi.ntnu.no/emner/empse/papers/kitchenham_2004.pdf
Pai, M.; McChulloch, M.; Gorman, J.D.; Pai, N.; Enanoria, W.; Kennedy, G.; Tharyan, P.;
Colford, Jr., J.M. (2004). Clinical Research Methods – Systematic reviews and meta-analyses: an
illustrated, step-by-step guide. The National Medical Journal of India, v. 17, n. 2. Disponível em
http://www.medepi.net/meta/guidelines/Pai_NMJI_2004_Systematic_reviews_illustrated_guide3.pdf
Travassos, G.H.; Biolchini, J. (2007). Revisões Sistemáticas Aplicadas a Engenharia de Software.
Tutorial SBES 2007, COPPE/UFRJ. Disponível em
http://wiki.dcc.ufba.br/pub/Aside/SeminarioRevisaoSistematicaEm17Out2008/sbes2007_revisaosistematica.pdf
Introdução à Revisão Sistemática : Referências 24

25. Perguntas?
● Apresentação disponível em:
http://www.din.uem.br/~pg45189/introducao-revisao-sistematica.pdf
Introdução à Revisão Sistemática : Perguntas? 25

26. Obrigado!
Rafael Leonardo Vivian
rlvivian.uem [at] gmail [dot] com
Universidade Estadual de Maringá
Departamento de Informática
Laboratório de Desenvolvimento Distribuído de Software