O documento descreve como calcular o índice de concordância entre observadores para avaliar a fidedignidade dos dados coletados. O índice é calculado comparando os registros de dois ou mais observadores que observam o mesmo evento de forma independente, e indica o grau de concordância entre eles. O cálculo pode ser feito para eventos, durações, intervalos e vários comportamentos observados simultaneamente. Quanto mais alto o índice, mais confiáveis são considerados os dados coletados.
1. Cálculo de concordância entre
observadores
Técnicas de observação e descrição
Aula 4
Texto base: Capítulo 4 (Fagundes, 1999)
2. Índice de concordância
• Ou índice de fidedignidade
Fidedignidade: O grau de exatidão de um dado
relato (de um evento, fenômeno, etc.) ou o grau
de confiança no testemunho de um dado
indivíduo. (Warren, 1934)
3. índice de concordância
• Por que calcular?
– Para se ter maior certeza sobre os dados
observados;
• Requisitos:
– Presença de dois ou mais observadores;
– Observam o mesmo fato, na mesma hora, mas
trabalham independentemente.
4. Cálculo para...
• Um comportamento
• Vários comportamentos
• Para cada um em separado
• Para um conjunto de comportamentos
• Comparar registros de dois observadores
entre si
• Comparar registros de vários observadores
• Um observador com os demais observadores
• Aos pares
6. Cálculo de concordância em registros de eventos
Ex. O observador A indicou que determinado
comportamento ocorreu 30 vezes; o observador B indicou
26 vezes:
x 100Índice de concordância =
Concordâncias + Discordâncias
Concordâncias
Obs. A Obs. B Concordâncias Discordâncias Total
7. Cálculo de concordância em registros de eventos
– O observador A indicou que determinado comportamento
ocorreu 30 vezes; o observador B indicou 26 vezes.
x 100Índice de concordância =
Concordâncias + Discordâncias
Concordâncias
Obs. A Obs. B Concordâncias Discordâncias Total
30 26 26 4 30
8. x 100Índice de concordância =
Concordâncias + Discordâncias
Concordâncias
Obs. A Obs. B Concordâncias Discordâncias Total
30 26 26 4 30
x 100Índice de concordância =
26+ 4
26
Índice de concordância = 86%
9. Cálculo de concordância em registros de duração
– Ex. Registro de duração: O observador A registrou que
determinado comportamento durou 73 segundos; o
observador B registrou 60 segundos:
x 100Índice de concordância =
Concordâncias + Discordâncias
Concordâncias
Obs. A Obs. B Concordâncias Discordâncias Total
10. Cálculo de concordância em registros de duração
– Ex. O observador A registrou que determinado
comportamento durou 73 segundos; o observador B
registrou 60 segundos:
x 100Índice de concordância =
Concordâncias + Discordâncias
Concordâncias
Obs. A Obs. B Concordâncias Discordâncias Total
73 60 60 13 73
11. x 100Índice de concordância =
Concordâncias + Discordâncias
Concordâncias
Obs. A Obs. B Concordâncias Discordâncias Total
73 60 60 13 73
x 100Índice de concordância =
60+ 13
60
Índice de concordância = 82%
12. Calcule o índice de concordância
• Duas pessoas registraram o seguinte total de
ocorrências:
Observador A = 80
Observador B = 94
Obs. A Obs. B Concordâncias Discordâncias Total
13. Obs. A Obs. B Concordâncias Discordâncias Total
80 94 80 14 85%
• Duas pessoas registraram o seguinte total de
ocorrências:
Observador A = 80
Observador B = 94
Calcule o índice de concordância
14. x 100Índice de concordância =
Concordâncias + Discordâncias
Concordâncias
Obs. A Obs. B Concordâncias Discordâncias Total
80 94 80 14 85%
x 100Índice de concordância =
80+ 14
80
Índice de concordância = 80/94 x 100 = 85%
15. Cálculo de concordância
em
a) registros de intervalos e
b) registros por amostragem
1 comportamento e 2 observadores
16. • Utiliza-se a mesma fórmula, contam-se as
“caselas” com ocorrência e não-ocorrência de
comportamentos.
• Exemplo: dados de dois observadores (A e B)
que anotaram o comportamento de “roer
unha” de uma pessoa.
17. min
intervalos
0-15 16-30 31-45 46-60
1 X X - -
2 - - - -
3 X X X X
min
intervalos
0-15 16-30 31-45 46-60
1 X X - -
2 X - - -
3 X - X X
Observador A
Observador B
X = ocorrência - = não-ocorrência D = discordância C = concordância
18. min
intervalos
0-15 16-30 31-45 46-60
1 X C X C - C X C
2 - D - C - C - C
3 X C X D X C X C
Observador A
Observador B
min
intervalos
0-15 16-30 31-45 46-60
1 X C X C - C X C
2 X D - C - C - C
3 X C - D X C X C
X = ocorrência - = não-ocorrência D = discordância C = concordância
19. Concordâncias Discordâncias Total
10 2 83%
min
intervalos
0-15 16-30 31-45 46-60
1 X C X C - C X C
2 - D - C - C - C
3 X C X D X C X C
Dupla A e B de observadores
x 100Índice de concordância =
10+ 2
10
20. Cálculo de concordância em
Registros cursivos
Dados nem sempre são passíveis de quantificação.
Portanto, nem sempre é possível o cálculo de
concordância com dados de registros cursivos
22. Cálculo de concordância com
vários comportamentos
• Nas situações normais de observação costuma-se
registrar vários comportamentos simultaneamente
• Como calcular o índice de concordância?
1. Verificar concordância entre os observadores relativa a
cada uma das categorias de comportamento em
separado
2. Verificar a concordância entre todas elas em conjunto Analisar quais comportamentos trazem mais dificuldade para se observar (quais
necessitam melhor definição)
obter uma visão global da concordância entre os
observadores (útil no treino de observadores)
23. Cálculo de concordância com três ou
mais observadores
• O cálculo é feito entre pares de observadores.
• Ex: se temos 3 observadores, A, B, C, o cálculo
é feito com os seguintes pares: AB, BC, AC
• Observador A = 74; observador B = 60, observador C = 50
Pares de obs. Concord. Discord. total Índice de conc.
AB
BC
AC
24. • Essa maneira de proceder é válida para todos
os tipos de registro, quando mais de dois
observadores são usados.
Pares de obs. Concord. Discord. total Índice de conc.
AB 60 13 73 82%
BC 50 10 60 83%
AC 50 23 73 68%
25. Aplicação
1. Verificar a confiabilidade dos registros obtidos.
2. Identificar a(s) categoria(s) comportamental com maior
dificuldade para ser observada
3. Indicar quando um observador já se encontra
suficientemente treinado.
Quando o índice de confiabilidade é igual ou maior que 70%
indica que os registros são “bons”, “confiáveis”, não
produzidos por mero acaso.
No treino de observadores, deve-se observar o índice acima
de 70% em 3 ou 4 sessões de observação.
26. exercícios
• Calcule a concordância dos observadores
hipotéticos, cujos dados obtidos segundo a
técnica registro de evento, são apresentados a
seguir:
Comporta-
mento
Obs A Obs B Dupla A e B de obs.
total total Conc. Disc. total Índice
Conc. %
Brigar
Brincar
Berrar
60 75 a
130 100
28 13
Total geral b
1ª. parte 2ª. parte 3ª. parte
27. • 1. Analisando os índices da 3ª parte da tabela,
identifique qual comportamento está
oferecendo maior dificuldade para ser
identificado.
• 2. Diga se é aceitável a concordância obtida
no conjunto das categorias: ( ) sim ( ) não
28. Comporta-
mento
Obs A Obs B Dupla A e B de obs.
total total Conc. Disc. total Índice
Conc. %
Brigar
Brincar
Berrar
60 75 60 15 75 80 a
130 100 100 30 130 76
28 13 13 15 28 41
Total geral 173 60 236 74 b
1ª. parte 2ª. parte 3ª. parte
1. Analisando os índices da 3ª parte da tabela, identifique qual
comportamento está oferecendo maior dificuldade para ser
identificado.
2. Diga se é aceitável a concordância obtida no conjunto das
categorias: ( ) sim ( ) não
29. • Registro de duração:
Calcule os índices de concordância para
(a)cada categoria
(b)Para o conjunto de categorias
Comporta
mento
Obs.A Obs.B Dupla A e B de
Obs.
Total
(s)
Total
(s)
Conc. Disc. Total Índice
Conc. %
Correr 135 120 % a
Cantar 313 260 %
caminhar 602 680 %
Total geral b
30. • Registro de duração:
Calcule os índices de concordância para
(a)cada categoria
(b)Para o conjunto de categorias
Comporta
mento
Obs.A Obs.B Dupla A e B de
Obs.
Total
(s)
Total
(s)
Conc. Disc. Total Índice
Conc. %
Correr 135 120 120 15 135 88% a
Cantar 313 260 260 53 313 83%
caminhar 602 680 602 78 680 88%
Total geral 982 146 1128 87% b