Cálculo de concordância entre
observadores
Técnicas de observação e descrição
Aula 4
Texto base: Capítulo 4 (Fagundes, 1999)
Índice de concordância
• Ou índice de fidedignidade
Fidedignidade: O grau de exatidão de um dado
relato (de um evento, fenômeno, etc.) ou o grau
de confiança no testemunho de um dado
indivíduo. (Warren, 1934)
índice de concordância
• Por que calcular?
– Para se ter maior certeza sobre os dados
observados;
• Requisitos:
– Presença de dois ou mais observadores;
– Observam o mesmo fato, na mesma hora, mas
trabalham independentemente.
Cálculo para...
• Um comportamento
• Vários comportamentos
• Para cada um em separado
• Para um conjunto de comportamentos
• Comparar registros de dois observadores
entre si
• Comparar registros de vários observadores
• Um observador com os demais observadores
• Aos pares
Cálculo de concordância
em
a) registros de eventos e
b) registros de duração
1 comportamento e 2 observadores
Cálculo de concordância em registros de eventos
Ex. O observador A indicou que determinado
comportamento ocorreu 30 vezes; o observador B indicou
26 vezes:
x 100Índice de concordância =
Concordâncias + Discordâncias
Concordâncias
Obs. A Obs. B Concordâncias Discordâncias Total
Cálculo de concordância em registros de eventos
– O observador A indicou que determinado comportamento
ocorreu 30 vezes; o observador B indicou 26 vezes.
x 100Índice de concordância =
Concordâncias + Discordâncias
Concordâncias
Obs. A Obs. B Concordâncias Discordâncias Total
30 26 26 4 30
x 100Índice de concordância =
Concordâncias + Discordâncias
Concordâncias
Obs. A Obs. B Concordâncias Discordâncias Total
30 26 26 4 30
x 100Índice de concordância =
26+ 4
26
Índice de concordância = 86%
Cálculo de concordância em registros de duração
– Ex. Registro de duração: O observador A registrou que
determinado comportamento durou 73 segundos; o
observador B registrou 60 segundos:
x 100Índice de concordância =
Concordâncias + Discordâncias
Concordâncias
Obs. A Obs. B Concordâncias Discordâncias Total
Cálculo de concordância em registros de duração
– Ex. O observador A registrou que determinado
comportamento durou 73 segundos; o observador B
registrou 60 segundos:
x 100Índice de concordância =
Concordâncias + Discordâncias
Concordâncias
Obs. A Obs. B Concordâncias Discordâncias Total
73 60 60 13 73
x 100Índice de concordância =
Concordâncias + Discordâncias
Concordâncias
Obs. A Obs. B Concordâncias Discordâncias Total
73 60 60 13 73
x 100Índice de concordância =
60+ 13
60
Índice de concordância = 82%
Calcule o índice de concordância
• Duas pessoas registraram o seguinte total de
ocorrências:
Observador A = 80
Observador B = 94
Obs. A Obs. B Concordâncias Discordâncias Total
Obs. A Obs. B Concordâncias Discordâncias Total
80 94 80 14 85%
• Duas pessoas registraram o seguinte total de
ocorrências:
Observador A = 80
Observador B = 94
Calcule o índice de concordância
x 100Índice de concordância =
Concordâncias + Discordâncias
Concordâncias
Obs. A Obs. B Concordâncias Discordâncias Total
80 94 80 14 85%
x 100Índice de concordância =
80+ 14
80
Índice de concordância = 80/94 x 100 = 85%
Cálculo de concordância
em
a) registros de intervalos e
b) registros por amostragem
1 comportamento e 2 observadores
• Utiliza-se a mesma fórmula, contam-se as
“caselas” com ocorrência e não-ocorrência de
comportamentos.
• Exemplo: dados de dois observadores (A e B)
que anotaram o comportamento de “roer
unha” de uma pessoa.
min
intervalos
0-15 16-30 31-45 46-60
1 X X - -
2 - - - -
3 X X X X
min
intervalos
0-15 16-30 31-45 46-60
1 X X - -
2 X - - -
3 X - X X
Observador A
Observador B
X = ocorrência - = não-ocorrência D = discordância C = concordância
min
intervalos
0-15 16-30 31-45 46-60
1 X C X C - C X C
2 - D - C - C - C
3 X C X D X C X C
Observador A
Observador B
min
intervalos
0-15 16-30 31-45 46-60
1 X C X C - C X C
2 X D - C - C - C
3 X C - D X C X C
X = ocorrência - = não-ocorrência D = discordância C = concordância
Concordâncias Discordâncias Total
10 2 83%
min
intervalos
0-15 16-30 31-45 46-60
1 X C X C - C X C
2 - D - C - C - C
3 X C X D X C X C
Dupla A e B de observadores
x 100Índice de concordância =
10+ 2
10
Cálculo de concordância em
Registros cursivos
Dados nem sempre são passíveis de quantificação.
Portanto, nem sempre é possível o cálculo de
concordância com dados de registros cursivos
Cálculo de concordância
Vários comportamentos e
mais de 3 observadores
Cálculo de concordância com
vários comportamentos
• Nas situações normais de observação costuma-se
registrar vários comportamentos simultaneamente
• Como calcular o índice de concordância?
1. Verificar concordância entre os observadores relativa a
cada uma das categorias de comportamento em
separado
2. Verificar a concordância entre todas elas em conjunto Analisar quais comportamentos trazem mais dificuldade para se observar (quais
necessitam melhor definição)
 obter uma visão global da concordância entre os
observadores (útil no treino de observadores)
Cálculo de concordância com três ou
mais observadores
• O cálculo é feito entre pares de observadores.
• Ex: se temos 3 observadores, A, B, C, o cálculo
é feito com os seguintes pares: AB, BC, AC
• Observador A = 74; observador B = 60, observador C = 50
Pares de obs. Concord. Discord. total Índice de conc.
AB
BC
AC
• Essa maneira de proceder é válida para todos
os tipos de registro, quando mais de dois
observadores são usados.
Pares de obs. Concord. Discord. total Índice de conc.
AB 60 13 73 82%
BC 50 10 60 83%
AC 50 23 73 68%
Aplicação
1. Verificar a confiabilidade dos registros obtidos.
2. Identificar a(s) categoria(s) comportamental com maior
dificuldade para ser observada
3. Indicar quando um observador já se encontra
suficientemente treinado.
Quando o índice de confiabilidade é igual ou maior que 70%
indica que os registros são “bons”, “confiáveis”, não
produzidos por mero acaso.
No treino de observadores, deve-se observar o índice acima
de 70% em 3 ou 4 sessões de observação.
exercícios
• Calcule a concordância dos observadores
hipotéticos, cujos dados obtidos segundo a
técnica registro de evento, são apresentados a
seguir:
Comporta-
mento
Obs A Obs B Dupla A e B de obs.
total total Conc. Disc. total Índice
Conc. %
Brigar
Brincar
Berrar
60 75 a
130 100
28 13
Total geral b
1ª. parte 2ª. parte 3ª. parte
• 1. Analisando os índices da 3ª parte da tabela,
identifique qual comportamento está
oferecendo maior dificuldade para ser
identificado.
• 2. Diga se é aceitável a concordância obtida
no conjunto das categorias: ( ) sim ( ) não
Comporta-
mento
Obs A Obs B Dupla A e B de obs.
total total Conc. Disc. total Índice
Conc. %
Brigar
Brincar
Berrar
60 75 60 15 75 80 a
130 100 100 30 130 76
28 13 13 15 28 41
Total geral 173 60 236 74 b
1ª. parte 2ª. parte 3ª. parte
1. Analisando os índices da 3ª parte da tabela, identifique qual
comportamento está oferecendo maior dificuldade para ser
identificado.
2. Diga se é aceitável a concordância obtida no conjunto das
categorias: ( ) sim ( ) não
• Registro de duração:
Calcule os índices de concordância para
(a)cada categoria
(b)Para o conjunto de categorias
Comporta
mento
Obs.A Obs.B Dupla A e B de
Obs.
Total
(s)
Total
(s)
Conc. Disc. Total Índice
Conc. %
Correr 135 120 % a
Cantar 313 260 %
caminhar 602 680 %
Total geral b
• Registro de duração:
Calcule os índices de concordância para
(a)cada categoria
(b)Para o conjunto de categorias
Comporta
mento
Obs.A Obs.B Dupla A e B de
Obs.
Total
(s)
Total
(s)
Conc. Disc. Total Índice
Conc. %
Correr 135 120 120 15 135 88% a
Cantar 313 260 260 53 313 83%
caminhar 602 680 602 78 680 88%
Total geral 982 146 1128 87% b

Cálculo de concordância entre observadores

  • 1.
    Cálculo de concordânciaentre observadores Técnicas de observação e descrição Aula 4 Texto base: Capítulo 4 (Fagundes, 1999)
  • 2.
    Índice de concordância •Ou índice de fidedignidade Fidedignidade: O grau de exatidão de um dado relato (de um evento, fenômeno, etc.) ou o grau de confiança no testemunho de um dado indivíduo. (Warren, 1934)
  • 3.
    índice de concordância •Por que calcular? – Para se ter maior certeza sobre os dados observados; • Requisitos: – Presença de dois ou mais observadores; – Observam o mesmo fato, na mesma hora, mas trabalham independentemente.
  • 4.
    Cálculo para... • Umcomportamento • Vários comportamentos • Para cada um em separado • Para um conjunto de comportamentos • Comparar registros de dois observadores entre si • Comparar registros de vários observadores • Um observador com os demais observadores • Aos pares
  • 5.
    Cálculo de concordância em a)registros de eventos e b) registros de duração 1 comportamento e 2 observadores
  • 6.
    Cálculo de concordânciaem registros de eventos Ex. O observador A indicou que determinado comportamento ocorreu 30 vezes; o observador B indicou 26 vezes: x 100Índice de concordância = Concordâncias + Discordâncias Concordâncias Obs. A Obs. B Concordâncias Discordâncias Total
  • 7.
    Cálculo de concordânciaem registros de eventos – O observador A indicou que determinado comportamento ocorreu 30 vezes; o observador B indicou 26 vezes. x 100Índice de concordância = Concordâncias + Discordâncias Concordâncias Obs. A Obs. B Concordâncias Discordâncias Total 30 26 26 4 30
  • 8.
    x 100Índice deconcordância = Concordâncias + Discordâncias Concordâncias Obs. A Obs. B Concordâncias Discordâncias Total 30 26 26 4 30 x 100Índice de concordância = 26+ 4 26 Índice de concordância = 86%
  • 9.
    Cálculo de concordânciaem registros de duração – Ex. Registro de duração: O observador A registrou que determinado comportamento durou 73 segundos; o observador B registrou 60 segundos: x 100Índice de concordância = Concordâncias + Discordâncias Concordâncias Obs. A Obs. B Concordâncias Discordâncias Total
  • 10.
    Cálculo de concordânciaem registros de duração – Ex. O observador A registrou que determinado comportamento durou 73 segundos; o observador B registrou 60 segundos: x 100Índice de concordância = Concordâncias + Discordâncias Concordâncias Obs. A Obs. B Concordâncias Discordâncias Total 73 60 60 13 73
  • 11.
    x 100Índice deconcordância = Concordâncias + Discordâncias Concordâncias Obs. A Obs. B Concordâncias Discordâncias Total 73 60 60 13 73 x 100Índice de concordância = 60+ 13 60 Índice de concordância = 82%
  • 12.
    Calcule o índicede concordância • Duas pessoas registraram o seguinte total de ocorrências: Observador A = 80 Observador B = 94 Obs. A Obs. B Concordâncias Discordâncias Total
  • 13.
    Obs. A Obs.B Concordâncias Discordâncias Total 80 94 80 14 85% • Duas pessoas registraram o seguinte total de ocorrências: Observador A = 80 Observador B = 94 Calcule o índice de concordância
  • 14.
    x 100Índice deconcordância = Concordâncias + Discordâncias Concordâncias Obs. A Obs. B Concordâncias Discordâncias Total 80 94 80 14 85% x 100Índice de concordância = 80+ 14 80 Índice de concordância = 80/94 x 100 = 85%
  • 15.
    Cálculo de concordância em a)registros de intervalos e b) registros por amostragem 1 comportamento e 2 observadores
  • 16.
    • Utiliza-se amesma fórmula, contam-se as “caselas” com ocorrência e não-ocorrência de comportamentos. • Exemplo: dados de dois observadores (A e B) que anotaram o comportamento de “roer unha” de uma pessoa.
  • 17.
    min intervalos 0-15 16-30 31-4546-60 1 X X - - 2 - - - - 3 X X X X min intervalos 0-15 16-30 31-45 46-60 1 X X - - 2 X - - - 3 X - X X Observador A Observador B X = ocorrência - = não-ocorrência D = discordância C = concordância
  • 18.
    min intervalos 0-15 16-30 31-4546-60 1 X C X C - C X C 2 - D - C - C - C 3 X C X D X C X C Observador A Observador B min intervalos 0-15 16-30 31-45 46-60 1 X C X C - C X C 2 X D - C - C - C 3 X C - D X C X C X = ocorrência - = não-ocorrência D = discordância C = concordância
  • 19.
    Concordâncias Discordâncias Total 102 83% min intervalos 0-15 16-30 31-45 46-60 1 X C X C - C X C 2 - D - C - C - C 3 X C X D X C X C Dupla A e B de observadores x 100Índice de concordância = 10+ 2 10
  • 20.
    Cálculo de concordânciaem Registros cursivos Dados nem sempre são passíveis de quantificação. Portanto, nem sempre é possível o cálculo de concordância com dados de registros cursivos
  • 21.
    Cálculo de concordância Várioscomportamentos e mais de 3 observadores
  • 22.
    Cálculo de concordânciacom vários comportamentos • Nas situações normais de observação costuma-se registrar vários comportamentos simultaneamente • Como calcular o índice de concordância? 1. Verificar concordância entre os observadores relativa a cada uma das categorias de comportamento em separado 2. Verificar a concordância entre todas elas em conjunto Analisar quais comportamentos trazem mais dificuldade para se observar (quais necessitam melhor definição)  obter uma visão global da concordância entre os observadores (útil no treino de observadores)
  • 23.
    Cálculo de concordânciacom três ou mais observadores • O cálculo é feito entre pares de observadores. • Ex: se temos 3 observadores, A, B, C, o cálculo é feito com os seguintes pares: AB, BC, AC • Observador A = 74; observador B = 60, observador C = 50 Pares de obs. Concord. Discord. total Índice de conc. AB BC AC
  • 24.
    • Essa maneirade proceder é válida para todos os tipos de registro, quando mais de dois observadores são usados. Pares de obs. Concord. Discord. total Índice de conc. AB 60 13 73 82% BC 50 10 60 83% AC 50 23 73 68%
  • 25.
    Aplicação 1. Verificar aconfiabilidade dos registros obtidos. 2. Identificar a(s) categoria(s) comportamental com maior dificuldade para ser observada 3. Indicar quando um observador já se encontra suficientemente treinado. Quando o índice de confiabilidade é igual ou maior que 70% indica que os registros são “bons”, “confiáveis”, não produzidos por mero acaso. No treino de observadores, deve-se observar o índice acima de 70% em 3 ou 4 sessões de observação.
  • 26.
    exercícios • Calcule aconcordância dos observadores hipotéticos, cujos dados obtidos segundo a técnica registro de evento, são apresentados a seguir: Comporta- mento Obs A Obs B Dupla A e B de obs. total total Conc. Disc. total Índice Conc. % Brigar Brincar Berrar 60 75 a 130 100 28 13 Total geral b 1ª. parte 2ª. parte 3ª. parte
  • 27.
    • 1. Analisandoos índices da 3ª parte da tabela, identifique qual comportamento está oferecendo maior dificuldade para ser identificado. • 2. Diga se é aceitável a concordância obtida no conjunto das categorias: ( ) sim ( ) não
  • 28.
    Comporta- mento Obs A ObsB Dupla A e B de obs. total total Conc. Disc. total Índice Conc. % Brigar Brincar Berrar 60 75 60 15 75 80 a 130 100 100 30 130 76 28 13 13 15 28 41 Total geral 173 60 236 74 b 1ª. parte 2ª. parte 3ª. parte 1. Analisando os índices da 3ª parte da tabela, identifique qual comportamento está oferecendo maior dificuldade para ser identificado. 2. Diga se é aceitável a concordância obtida no conjunto das categorias: ( ) sim ( ) não
  • 29.
    • Registro deduração: Calcule os índices de concordância para (a)cada categoria (b)Para o conjunto de categorias Comporta mento Obs.A Obs.B Dupla A e B de Obs. Total (s) Total (s) Conc. Disc. Total Índice Conc. % Correr 135 120 % a Cantar 313 260 % caminhar 602 680 % Total geral b
  • 30.
    • Registro deduração: Calcule os índices de concordância para (a)cada categoria (b)Para o conjunto de categorias Comporta mento Obs.A Obs.B Dupla A e B de Obs. Total (s) Total (s) Conc. Disc. Total Índice Conc. % Correr 135 120 120 15 135 88% a Cantar 313 260 260 53 313 83% caminhar 602 680 602 78 680 88% Total geral 982 146 1128 87% b