O documento apresenta os resultados de um estudo sobre a qualidade da formação virtual ou e-learning nas administrações públicas da América Latina. O estudo objetivou conhecer os fatores de qualidade mais relevantes para os usuários e elaborar uma ferramenta para comparar programas de formação virtual. Foram aplicados questionários e entrevistas com servidores públicos de diversas instituições no Brasil, Argentina, Costa Rica e outros países. O estudo identificou percepções e preferências dos servidores em relação ao e-learning, além de fatores que influenciam
Relato de pesquisa estudo sobre a qualidade do e-learning - versão final andrea filatro
1. ESTUDO SOBRE A QUALIDADE DA
FORMAÇÃO VIRTUAL OU E-LEARNING
NAS ADMINISTRAÇÕES PÚBLICAS DA
AMÉRICA LATINA
2. ESCOPO
Objetivo
Conhecer os fatores de
qualidade mais relevantes
para os usuários de e-
learning na América Latina
Desdobramento
Elaborar ferramenta para
comparar programas de
formação virtual com
variáveis de qualidade
identificadas
2
3. FORMATO DO ESTUDO
Concurso promovido por CEDDET, com vitória do
Prof. D. Javier Callejo Gallego (diretor)
Equipe de colaboração na América Latina
Coordenadora de pesquisa campo: Marta Mena
Especialistas Argentina: Marta Mena y María Laura
Díez
Especialista Costa Rica: Gerardo Coto González
Especialista Brasil: Andrea Filatro
Financiamento INAP e CEDDET
3
4. COLETA DE DADOS (MAIO A JUNHO 2010)
Questionários objetivos Entrevistas abertas
4
6. INSTITUIÇÕES PARTICIPANTES NO BRASIL
Assembleia Legislativa do Estado de MG Escola de Governo do Tocantins Prefeitura de Diadema
Caixa Econômica Federal Escola de Governo e Desenvolvimento do Prefeitura de Várzea Paulista
Servidor - Várzea Paulista (SP)
Câmara dos Deputados Secretaria da Educação do Estado da Bahia
Escola de Governo e Desenvolvimento do
Celepar – Informática do Paraná Servidor de Campinas Secretaria da Fazenda - PE
Centro Digital da Prefeitura São Caetano do Sul Escola de Governo e Gestão de São Luís Secretaria da Fazenda de São Paulo
Centro Paula Souza Escola de Inteligência / ABIN Secretaria da Saúde da Santo André
Controladoria-geral da União Escola do Legislativo da CMBH Secretaria da Segurança Pública – RS
ESAP – Guarulhos Escola do Legislativo do Distrito Federal SENAC
Escola da Advocacia-Geral da União Escola do Servidor Público Prefeitura São Paulo SENAI-AC / CE / PE / SP
Escola da Previdência Social Escola Judicial do TRT da Terceira Região Serpro
Escola de Administração Pública de Diadema FATEC – Americana Superintendência da Escola de Governo de MT
Escola de Gestão da Secretaria de Segurança Fundação Escola do Servidor Público do Acre Tribunal de Contas da União
Pública RS
Fundação Instituto de Administração (FIA) Tribunal de Contas do Estado de MS
Escola de Governo Germano Santos
Fundação Joaquim Nabuco Tribunal de Contas do Estado de Pernambuco
Escola de Gestão Prefeitura de Hortolândia
Fundação Prefeito Faria Lima-Cepam Tribunal de Contas do Estado de Santa Catarina
Escola de Gestão Pública do Estado do Ceará
Fundap Tribunal de Contas dos Municípios do Ceará
Escola de Gestão Pública Dr. José Caetano
Graziosi IBGE Tribunal Regional do Trabalho 9a. Região
Escola de Governo da Prefeitura Campo Grande IMAP – Curitiba UDESC / UFABC / UFG / UFJF / UFPA / UFPE /
UFSC / UFSCAR / USP/ UFRR / Unifesp
Escola de Governo de Alagoas INSS
UniBacen – Banco Central do Brasil
Escola de Governo do Distrito Federal Instituto de Contas 5 de Outubro/TCE-TO
UNICEUMA
Escola de Governo do Estado de Goiás Instituto Municipal de Administração Pública
Universidade Corporativa do Banco do Brasil
Escola de Governo do Estado do Pará Instituto Serzedello Corrêa
Universidade Corporativa dos Correios
Escola de Governo do Paraná Marinha do Brasil – Diretoria de Ensino
Universidade Corporativa Virtual da Polícia
Escola de Governo do Rio Grande do Norte Ministério Público de Pernambuco Federal
6
7. PERFIL GLOBAL DA AMOSTRA
Gênero: 50% homens e 50% mulheres
Idade média: 40,7 anos
Tempo de atuação no serviço público: 14 anos
Áreas de atuação
Poder Judiciário; 15%
Educação: 11%
Administração: 11%
Formação acadêmica
Pós-graduação e mestrado: 39,8%
Graduação: 35,9%
Doutorado: 5,3%
Nível pré-universitário: 8,3%
7
8. CURSOS COMPLETOS DE E-LEARNING OU
FORMAÇÃO VIRTUAL
Por favor, informe quantos cursos completos de e-learning ou
formação virtual você já realizou ao longo de sua vida profissional
Nenhum………………………………… 0 (por favor, passar à pergunta 4)
Um……………………………………... 1 (por favor, passar à pergunta 12)
Dois………………………………………2 (por favor, passar à pergunta 11)
Três, quatro, cinco……………………..3 (por favor, passar à pergunta 11)
Mais de cinco…………………………..4 (por favor, passar à pergunta 11)
Entendemos que, independentemente da nota final, você não pediu para
deixar o curso.
8
9. CURSOS COMPLETOS DE E-LEARNING OU
FORMAÇÃO VIRTUAL
mais de Nenhum
5 6% 1
26% 20%
2
3a5 16%
32%
9
10. Qual é a razão principal por que você não realizou nenhum curso de e-
learning ou formação virtual ao longo de sua vida profissional?
- Nunca me ofereceram onde tenho trabalhado………………..........… 1
- Não tenho tempo para a formação virtual ou presencial……........... 2
- Comecei, mas não terminei………………………………………........... 3
- É um tipo de formação que não me atrai…………………………....... 4
- Com conteúdos semelhantes, prefiro a formação presencial……..... 5
- Outra razão (por favor, exponha a seguir a razão por que você não realizou
nenhum curso completo de formação virtual): _____________
10
11. PERCEPÇÕES DO SERVIDOR PÚBLICO SEM
EXPERIÊNCIA EM E-LEARNING
Do total (37 servidores, ou 6% da amostra):
• 33% nunca receberam oferta de realização
de um curso de e-learning
• 28% começaram e não terminaram cursos
• 22% são “resistentes”: a experiência não
lhes atrai ou a preferem presencialmente
11
12. PERCEPÇÃO GERAL SOBRE E-LEARNING
Conforme sua experiência, em que medida as pessoas de seu
ambiente profissional que nunca participaram de cursos de
formação virtual pensam que….?
13. PERCEPÇÃO GERAL SOBRE E-LEARNING
cv
100 Não sei
80 Nada
cv 60 cv
Pouco
40 Bastante
20 Muito
0
cv
14. DOIS POLOS NA PERCEPÇÃO
DO E-LEARNING
Maior flexibilidade na
formação
Polo sedutor
Polo dissuasor
Maior envolvimento
por parte do aluno
14
15. COMPARAÇÃO E-LEARNING X PRESENCIAL
Comparando a formação presencial e a virtual, qual você
considera melhor para alcançar os seguintes objetivos?
15
16. VANTAGENS COMPARATIVAS DO PRESENCIAL
SOBRE O E-LEARNING
• Debate sobre conteúdos: 44% x 38%
• Aprofundamento nos conhecimentos: 40% X 29%
• Relacionamento com colegas: 58% X 29%
• Fluidez na relação com professores: 55% X 28%
• Obter um título reconhecido: 48% x 15%
16
17. POLOS DE ESFORÇO
núcleo dos máximos vantagem na adaptação
valores da formação: às condições práticas
diálogo, profundidade e (espaço-temporais) do
relação, sintetizados no receptor da formação
reconhecimento do título
Presencial E-learning
Condições materiais Grande esforço Menor esforço
Conteúdos do
Menor esforço Grande esforço
conhecimento
17
18. ESCOLHA DE MODALIDADE
Se na instituição em que você trabalha oferecessem um curso de
formação virtual e outro curso de formação presencial, com conteúdos
e programas semelhantes, qual você escolheria nesse momento?
- Formação virtual ………………...1 (por favor, passar à pergunta 6)
- Formação presencial................... 2 (por favor, passar à pergunta 7)
- Nenhum dos dois………………… 3 (por favor, passar à pergunta 8)
Por que você escolheria o curso de formação virtual? (por
favor, responder e passar à pergunta 9).
Por que você escolheria o curso de formação presencial? (por
favor, responder e passar à pergunta 9).
18
20. ANÁLISE DE CLUSTERS
Favoráveis ao
presencial
Favoráveis ao
e-learning
Nenhum dos dois
isoladamente
20
21. RECOMENDAÇÃO DE FORMAÇÃO VIRTUAL
PARA SERVIDORES
Você recomendaria a formação virtual para o desenvolvimento
profissional dos servidores de seu país?
- Sim, quando não houver ofertas similares de formação presencial… 1
- Sim, inclusive quando houver ofertas similares presenciais ............ 2
- Não, nunca ............................................................................................ 3
- Não sei.................................................................................................... 0
Por quê? (por favor, explique brevemente sua resposta à pergunta 25)
21
22. RECOMENDAÇÃO DE FORMAÇÃO VIRTUAL
PARA SERVIDORES
Sim, quand
o não
houver
presencial
11,6%
Sim, inclusi
ve quando
houver
presencial
86,2%
22
23. RAZÕES PARA RECOMENDAR FORMAÇÃO
VIRTUAL PARA SERVIDORES
• Flexibilidade: 34,5%
• Oportunidade de obter conhecimento em
diferentes áreas de interesse: 27%
• Um método tão valioso quanto o presencial:
12%
23
24. OBSTÁCULOS PESSOAIS
À FORMAÇÃO VIRTUAL
Em sua opinião, em que medida os seguintes aspectos são um
obstáculo para que você realize um curso de formação
virtual, com conteúdos do seu interesse profissional, no caso de
ser oferecido por sua organização?
24
25. OBSTÁCULOS INSTITUCIONAIS
À FORMAÇÃO VIRTUAL
Em que medida os seguintes aspectos são obstáculos para que a
formação virtual seja adotada no desenvolvimento dos servidores
das Administrações Públicas de seu país?
25
26. DIFERENÇA ENTRE CURSOS
Segundo sua experiência, existem muitas diferenças de
qualidade nos distintos cursos de e-learning?
Sim 1
Não 2
Não sei 0
26
28. INDICADORES DE QUALIDADE
Por favor, assinale agora em que medida é importante cada um
dos seguintes aspectos para a qualidade de um curso ou
programa formativo virtual
28
29. INDICADORES DE QUALIDADE
Clareza nos objetivos
Exigência de pouco 4.00
Materiais propostos
esforço
3.50
Aspectos complementares
Seleção dos participantes 3.00 Respostas rápidas
2.50
2.00 Facilidade no uso da
Tutoria telefônica
1.50 plataforma
1.00
Colaboração 0.50 Prestígio da instituição
internacional
0.00
Presencialidade Reconhecimento do título
Atenção administrativa Avaliação continuada
Aplicação direta do
Prestígio dos professores
Adaptação ao ritmo conhecimento
Fóruns ou chats
individual
29
30. CANAIS DA OFERTA FORMATIVA
Através de quais canais você teve notícias do último curso ou
programa de formação virtual realizado?
Jornal ………………………....……………………………………….. 1
Televisão ……………………………………………………………….. 2
Rádio …………………………………………………………………….. 3
Internet ………………………………………………………………….. 4
Folhetos, folders ………………………………………………………... 5
Informação em mural de anúncios de centro formativo….............. 6
Organização em que trabalha .........................………………………..7
Amigos, antigos companheiros……………………………………….…8
Outro canal (por favor, indique o canal) ________________________
30
31. CANAIS DA OFERTA FORMATIVA
Amigos Outros Jornal Rádio
7% 6% 1% 0%
Internet
44%
Organização
em que
trabalha
36%
Mural de Folhetos, folder
anúncios s
5% 1%
31
32. AUTONOMIA DA PROPOSTA
De quem partiu a proposta de participação nesse curso ou
programa de formação virtual?
De você mesmo ……………………………………………………. 1
De seus familiares………………………………………………… 2
De seu chefe imediato ……………………………………………. 3
Do Departamento de Recursos Humanos de sua Organização 4
De outro tipo de pessoa ou instância (neste caso escreva qual)
______________________
32
33. AUTONOMIA DA PROPOSTA
Outros
6%
RH de sua
organização
18%
Chefe
imediato
14% Você mesmo
62%
Familiares
0%
33
34. SATISFAÇÃO COM RESULTADOS DO ÚLTIMO
CURSO ON-LINE
Nenhum dos dois isoladamente
Favoráveis ao e-learning
Favoráveis ao presencial
CEDDET
Costa Rica
Brasil
Argentina
34
35. SATISFAÇÃO COM RESULTADOS DO ÚLTIMO
CURSO ON-LINE
Aumento de salário
Promoção
Aumento de responsabilidades
Vínculos com profissionais de outros países
Reconhecimento dos superiores
Reconhecimento do título
Vínculos com profissionais de seu país
Relação com colegas de trabalho
Novas relações sociais
Aplicação direta de conhecimentos
Novos conhecimentos adquiridos
Muito / bastante Pouco/nada Não sei
35
36. CONCLUSÕES A PARTIR DAS ENTREVISTAS
ABERTAS
• Um sistema de avaliação é imprescindível para
retroalimentar a gestão das ofertas virtuais
• É pertinente a criação de normas específica para
homologar as ofertas virtuais para as APs
• Dupla lógica de avaliação e padrões de qualidade
• adaptação aos contextos de aplicação da formação
virtual, com clara definição dos objetivos e
identificação do perfil profissional
• desenho global da proposta – um sistema que
consista em mais que a soma das qualificações, mas
articule-as em suas diferentes dimensões e relações
36