SlideShare uma empresa Scribd logo
1 de 19
Baixar para ler offline
4         LA TEORÍA DE LA EVALUACIÓN
          DE PROGRAMAS

          Catalina Martínez Mediano


          Departamento de Métodos de Investigación
          y Diagnóstico en Educación. LJNED




E
          n este trabajo sobre La teoría de la evaluación de programas
          comenzamos realizando una revisión de la situación actual de la
          evaluación como disciplina de conocimiento, mencionando sus
          elementos constitutivos, para centrarnos, a continuación, en la
          evolución que ha seguido la disciplina de la Evaluación de
programas, volcada en un primer momento en los métodos de investigación
contribuyendo a su desarrollo adaptado a la problemática evaluativa y,
posteriormente, en el desarrollo de la teoría de la evaluación de programas,
fundamental en toda disciplina científica, que orienta la elaboración de los
programas sociales y educativos, clarifica los procesos y las metas de la
evaluación, comprueba su realización práctica y resultados, asesora en la
Mejora de los programas y contribuye, en definitiva, a la construcción del
conocimiento.

1. LA EVALUACIÓN COMO DISCIPLINA
   DE CONOCIMIENTO

•^na disciplina es un constructo intelectual organizado. La esencia de una
 isciplina es su trabajo y la clave para su existencia es su concepto general
y su metateoría. Podemos distinguir cuatro elementos en la emergencia y
 esarrollo de una nueva disciplina (Scriven, 1991:25). Los cuatro elementos
^on independientes.
74                                                                  EDUCACIÓN X X I


     - El primer elemento es la consciencia y reconocimiento explícito de que
       algo nuevo está emergiendo y existe una definición de ese algo nuevo.
       Lograr su definición o esbozar sus límites conlleva varios intentos par-
       cialmente prescriptivos, siendo éste un elemento crucial porque en él
       descansan las normas o las pautas de desarrollo para que esa nueva dis-
       ciplina crezca. Es el primer paso hacia la metateoría: la conciencia de
       un nuevo campo y su definición, dibujando su forma y sus límites, y
       ello se da en esta nueva disciplina.

     - El segundo elemento consiste en identificar y desarrollar una metodo-
       logía apropiada, entendida como un grupo de procedimientos e instru-
       mentos para generar resultados útiles en el nuevo campo. La metodo-
       logía puede ser altamente específica, pero puede abarcar un amplio
       rango o niveles de métodos generales y modelos de análisis; así ocurre
       en esta nueva disciplina.

     - El tercer elemento requiere un desarrollo del campo consistente en una
       base de datos, de producción de investigaciones, de informes, de des-
       cripciones, de ilustraciones y de principios y teorías generales. Los ele-
       mentos de su generalidad deben presentarse explícita o implícitamente
       al menos en forma de nuevos esquemas conceptuales, con la terminolo-
       gía específica asociada. Ello está representado por los múltiples mode-
       los evaluativos existentes, cada vez con un mayor grado de elaboración
       en sus concepciones teóricas y procedimentales.

     - El cuarto elemento está relacionado con el desarrollo de una metateoría
       de la disciplina que proporcione un método de trabajo para la práctica.
       La metateoría es casi siempre descriptiva y prescriptiva, derivando la
       última de las aportaciones de la primera. Sin una metateoría no puede
       identificarse la nueva área de estudio como una nueva disciplina al no
       tener identificado y definido su territorio, no poder explicitar sus pro-
       cedimientos, su metodología y sus límites. Y es lo que pretende lograr la
       reflexión sobre la existencia de la disciplina y sobre los elementos
       c o m u n e s y diferenciales que se pueden extraer de la diversidad de
       modelos evaluativos.

    Los límites de la evaluación como disciplina son definidos por la mayoría
de los teóricos de la evaluación en términos que la consideran un área de eva-
luación aplicada, como es la evaluación de programas. Scriven defiende que
la disciplina debe considerarse desde una concepción amplia que recibiría el
nombre de Evaluación, y que estaría integrada por las disciplinas de Evalua-
ción de programas, de productos, de personal, de rendimiento, de proyectos
y de políticas, que serían las grandes seis subáreas de la Evaluación.

   La Evaluación de programas utiliza métodos y técnicas de investigación
que proceden de las Ciencias Sociales y de otras disciplinas como el Derecho,
LA^TEORIA DE LA EVALUACIÓN DE PROGRAMAS                                          75


laLóg ica, la Etica, así como del propio desarrollo de la teoría para la evalua-
ción de programas.

    La Evaluación es u n a nueva disciplina pero u n a antigua práctica. La
defensa de la Evaluación c o m o disciplina descansa en sus características
científicas en contraste con las evaluaciones subjetivas o no sistemáticas. La
evaluación es considerada como ciencia por estar comprometida con la pro-
ducción de conocimiento, y no sólo conocimiento práctico; la evaluación,
desde el punto de vista de la práctica, se interesa por conocer el mérito rela-
tivo de diferentes métodos de enseñanza, o de diferentes teorías de aprendi-
zaje, o por los cambios en la salud como consecuencia de nuevas concepcio-
nes en la práctica sanitaria. Pero también la evaluación es esencial para
distinguir la ciencia de la pseudociencia al evaluar la calidad de la evidencia
científica, la calidad de los diseños de investigación, de los instrumentos de
Tiedida, de sus conclusiones, la calidad de los procedimientos en ingeniería,
en las matemáticas, en los procesos judiciales. En el sentido de proceso inte-
lectual, la evaluación forma parte de todas las disciplinas, tecnologías,
nianualidades y de pensamiento racional en general (Scriven, 1991:4).

   La evaluación, asimismo, es considerada una transdisciplina, definiendo
este término, creado por Scriven, como una disciplina instrumental que sirve
a otras disciplinas - c o m o es el caso de la estadística o la lógica.

   El proceso de la evaluación no es simple, siendo su complejidad el princi-
pal motivo de que en más de dos milenios haya eludido un análisis satisfac-
torio sobre su naturaleza y sus límites disciplinarios. Y es desde finales de la
década de los 60 cuando se viene realizando un gran esfuerzo por analizar la
naturaleza de la evaluación.

   Scriven hace el siguiente análisis sobre la naturaleza de la evaluación:

^ evaluación no es sólo una mera acumulación y síntesis de datos relevantes
Pdra la toma de decisiones. Digamos que éste es uno de los componentes de la
^"^aluación y uno de sus propósitos.

^l otro componente, y previo al anterior, es el de las premisas o criterios evalua-
ítvos que verifican los valores relevantes y las normas elegidas para la realiza-
ción de la evaluación.

    La evaluación como disciplina académica interesada en temas relativos a
'a evaluación de programas, de personas, de productos, etc., no ha empezado
^ ser considerada como tal sino en el último tercio del siglo XX. La discusión
nietodológica acaecida en los últimos años, desde diversos campos, ha sido
fructífera para abrir a la evaluación su propio campo. Pero el primer paso
para que la evaluación se constituya en una disciplina científica va más allá
de la simple práctica evaluativa elaborando guías que orienten dicha prácti-
76                                                                          EDUCACIÓN X X I


ca. Comienza identificando normas que gobiernen, prescriban, las evaluacio-
nes, encontrándose suficientemente desarrollado en la actualidad, en el sub-
campo de la Evaluación de programas, mediante guías para realizar evalua-
ciones c o m o las de Brinkerhoff et al., 1983; el Joint Committee, 1981;
Mertens, 1989; Patton, 1980, 1990; Rossi y Freeman 1989; Smith, 1989; Wort-
hen y Sanders, 1987; Worthen y White 1987, y muchas más.

    Para lograr el desarrollo de la disciplina debemos considerar el concepto
de Evaluación en toda su amplitud, incluyendo todos los ámbitos a los que se
aplica, tales como la Evaluación de programas, productos, personas, control
de calidad, políticas, etc. Además, debemos ir más allá de la discusión meto-
dológica para entrar en temas sobre los límites y contenidos de la Evalua-
ción, las diferencias y relaciones de la Evaluación según se desarrolle en
ámbitos científicos, humanísticos, jurídicos, artísticos, etc. Explicaciones
sobre la adecuación de una u otra metodología según el ámbito y propósito
de la evaluación (metametodología), el desarrollo de los procesos lógicos de
las evaluaciones, así como el desarrollo de las teorías evaluativas y la metate-
oría de la Evaluación.

    La metateoría es la teoría sobre la naturaleza de un campo de investiga-
ción. Está interesada por la definición del campo que estudia, por sus lími-
tes, por las diferencias entre el campo y los campos colaterales, por las razo-
nes por las que ciertos métodos trabajan bien en la disciplina y las razones
por las que otros son inadecuados. Debe ser capaz de desarrollar argumentos
en favor de la Evaluación como disciplina, así como sugerir y justificar líneas
para la investigación y su desarrollo.

    Hasta hace poco, la elaboración de los distintos modelos sobre la evalua-
ción de programas es lo que formaba parte de la metateoría de la evaluación
al constituir un nivel que orienta las realizaciones prácticas y discusiones
metodológicas. La metateoría se va elaborando desde todos los niveles e inci-
diendo en ellos; por ejemplo, en el desarrollo de los instrumentos de medida,
en el de los métodos, las técnicas y las teorías y su discusión; desde todos los
ámbitos donde se utiliza la evaluación nos preguntamos, explicamos y justi-
ficamos el uso de una técnica, de un instrumento, de un método, de una teo-
ría, de un plan o proyecto en su totalidad y del paradigma que lo fundamen-
ta. C o n t i n u a m e n t e e s t a m o s r e c u r r i e n d o a la metateoría y estamos
contribuyendo al desarrollo de la misma. La metateoría puede estar implíci-
ta en la misma práctica y enseñar mediante el ejemplo de esa práctica. Y,
aunque los modelos de Evaluación de programas han contribuido al desarro-
llo de la disciplina de la Evaluación, hay que seguir trabajando para lograr
esa aportación fundamental que dote a la evaluación de una teoría general,
una metodología general, unas guías generales que orienten la práctica y u n a
metateoría general para llegar a la esencia de la disciplina.
    La Evaluación es el nombre de una disciplina a u t ó n o m a con su propia
clasificación en la Biblioteca del Congreso de los Estados Unidos (Scriven,
LAJTEORÍA DE LA EVALUACIÓN DE PROGRAMAS                                       77


1991:141). Esta disciplina se refiere al estudio y aplicación de procedimien-
tos para hacer evaluaciones objetivas y sistemáticas. Dentro de esta discipli-
na autónoma, hay áreas semiautónomas como son las disciplinas de evalua-
ción de programas, de productos, de personal, de rendimiento, de proyectos
y de políticas. Otros campos aplicados autónomos incluidos son la valora-
ción tecnológica, la evaluación médica y psicológica, el control de calidad.
Otras aplicaciones se hacen en disciplinas tales como el curriculum, la críti-
ca literaria, etc.

  Scriven hace dos manifestaciones diferentes en t o r n o a la Evaluación
como disciplina:

   1. Hay una sola disciplina de evaluación, que es una transdisciplina, con-
      sistente en un amplio rango de aplicaciones prácticas de la evaluación
      en varios campos. Uno de ellos, el más desarrollado, integrado por su
      propio concepto, teoría y metateoría es la evaluación de programas.
      Una naciente disciplina central dedicada al desarrollo de una lógica
      válida y distintiva, métodos y teorías generales para la evaluación.

   2. Los distintos campos de la Evaluación como son la Evaluación de pro-
      gramas, productos, políticas, control de calidad, personal, etc., y que
      han desarrollado gran cantidad de modelos propios, pueden ser mejo-
      rados por el reconocimiento de sus conexiones con la disciplina central
      de la Evaluación.


    DEL DESARROLLO METODOLÓGICO
    A LA TEORÍA DE LA EVALUACIÓN
    DE PROGRAMAS

    La teoría proporciona un marco de referencia para ayudar a las personas
^ comprender su m u n d o y a actuar en él. La teoría es crucial para la investi-
gación; no sólo proporciona orientaciones para analizar un fenómeno, sino
^ue proporciona un esquema para comprender el significado de los resulta-
rlos de la investigación.

    Sin embargo, hasta hace poco tiempo, la literatura evaluativa apenas
piencionaba la importancia de la teoría de la evaluación de programas ni la
 ficorporación de dicha teoría en los procesos de evaluación. La tendencia ha
consistido en que las evaluaciones estén orientadas por los métodos, y, aun-
^"Jc esto ha supuesto importantes contribuciones para el desarrollo de la
  Valuación de programas, de otro lado, ha ocasionado que se descuidara el
  esarrollo del marco conceptual que guiara la práctica evaluativa. Shadish y
*^eichardt (1987) justifican tal hecho argumentando que la acción y la prácti-
 f preceden al desarrollo de la teoría en cualquier disciplina, y a la evalua-
ción de programas le ha ocurrido lo mismo.
78                                                                        EDUCACIÓN X X I


    Esto puede explicarse, parcialmente, p o r la preocupación por realizar
mejores investigaciones evaluativas que tuvieran en cuenta todos los ele-
mentos que inciden en la consecución de lo pretendido por un programa, lo
que llevó a la necesidad de preocuparse por ampliar los enfoques y meto-
dologías de investigación aplicados a la evaluación de programas. De m o d o
que, en los primeros m o m e n t o s del desarrollo de la Evaluación de progra-
m a s , los m é t o d o s d e investigación científica h a n j u g a d o un papel m u y
importante en muchos de los trabajos de evaluación realizados en un inten-
to por definir y conceptualizar la evaluación de programas. Así, S u c h m a n
(1967) vio la evaluación como la utilización de los métodos y técnicas de
investigación científica utilizados con el propósito de evaluar. La evalua-
ción de programas no se veía como u n a disciplina de conocimiento, sino
como u n a modalidad de investigación aplicada dentro de la Educación y de
las Ciencias Sociales. Y la utilización de los métodos científicos más presti-
giosos, en su m o m e n t o , era crucial p a r a poder reclamar el estatus científi-
co de esta nueva disciplina.

    Así, Tyler, que concebía la evaluación como la determinación del grado en
que los objetivos de un programa eran realmente conseguidos, establecía las
metas generales y los objetivos conductuales y comparaba los resultados con
las metas, utilizando la metodología de los diseños experimentales y cuasiex-
perimentales, p r u e b a s e s t a n d a r i z a d a s de medida y el informe clásico de
investigación sobre la conveniencia de mantener o modificar los programas.

   Stufflebeam considera la evaluación como el proceso de identificar, obte-
ner y proporcionar información útil y descriptiva del valor y mérito de las
metas, la planificación, la realización y el impacto de un programa, con el fin
de servir de guía para la toma de decisiones, solucionar los problemas de res-
ponsabilidad y comprender los fenómenos implicados. Utiliza una metodolo-
gía diversa en función de cada tipo de evaluación contexto, entrada, proceso
o producto, y sus informes son frecuentes para proporcionar u n a guía para la
toma de decisiones de mejora del programa, y la generalización posible es la
que permita el muestreo y las metodologías utilizadas.

    Para Scriven la evaluación, como ciencia de la valoración, consiste en
determinar el mérito y valor del objeto evaluado. Para él la evaluación es la
recogida y síntesis de información basada en criterios evaluativos que verifi-
quen los valores relevantes y las normas elegidas para la realización, con la
finalidad de ser utilizada en la toma de decisiones. Sirve a las funciones for-
mativa, proporcionando información para mejorar un programa durante su
realización, y sumativa, proporcionando información para implantar, modi-
ficar o retirar un programa. Utiliza u n a metodología neopositivista, relativis-
ta y de la lógica probativa, utilizando un tipo de informe descriptivo. La
generalización de los resultados es la que permite la validez externa dificul-
tada por la relatividad de los criterios de valor.
L A j n ; O R Í A DE LA EVALUACIÓN DE PROGRAMAS                              79



   Stake considera que la evaluación sirve para descubrir el mérito y las
deficiencias de un programa. En su "modelo de evaluación respondiente", el
evaluador debe asegurarse de prestar atención a aquello por lo que le piden
que haga la evaluación, pero también debe prestar atención a lo que está ocu-
rriendo en el programa y elegir las cuestiones y criterios de valor. Utiliza
metodologías cualitativas, fundamentalmente el estudio de caso. La generali-
zación es la propia de las investigaciones naturalista, apoyándose en la expe-
riencia vicaria. Es útil si descubre el mérito y las deficiencias de un programa
para ayudar a sus participantes a incrementar su comprensión y responder a
sus necesidades.

   Para Guba y Lincoln, la evaluación, en un contexto o situación particular,
es un proceso de recogida de datos, en continua e inseparable valoración e
interpretación basada en el consenso, en donde los hechos y valores van uni-
dos. El evaluador utiliza metodologías naturalistas, trabaja en equipo, con
todo el grupo implicado en la evaluación. Establecen círculos hermenéuticos
para lograr construcciones e identificar cuestiones. El informe es descripti-
vo, facilitando la experiencia vicaria para la generalización de los hallazgos.

    Cronbach define la evaluación como la recogida y uso de la información
para tomar decisiones sobre un programa educativo; es una actividad diver-
sificada y plural, y ni un solo grupo de principios puede ser suficiente para
todas las situaciones. Ve la evaluación integrada en la investigación política.
Defiende el uso de metodologías cuantitativas y cualitativas. Sus informes
son narrativos para facilitar la experiencia vicaria. Considera que la generali-
zación, el generar conocimiento extrapolable desde las personas, situaciones,
tratamientos y observaciones a otros, es lo más importante de la investiga-
ción evaluativa. Su finalidad debe servir para la mejora de los programas y
para la formación de la comunidad política.

   Pérez Juste define la evaluación como un proceso sistemático de recogida
de información rigurosa, valiosa, válida y fiable, orientado a valorar la cali-
dad y los logros de un programa para la toma de decisiones de mejora del
programa, del personal implicado y del cuerpo social en el que se encuentra
'nrnerso. Utiliza metodologías cuantitativas y cualitativas. Su informe es des-
criptivo, basado en los datos y en los juicios. La generalización, aquella que
permite el diseño, y su utilidad para la mejora del personal, del programa y
de la comunidad.

   Como podemos ver, el "enfoque de evaluación orientada por el método" se
VIO claramente apoyada por el hecho de que la mayoría de las perspectivas de
evaluación han estado orientadas principalmente por el método. Por ejem-
P'o, para Campbell y Stanley (1963) y Cook (y Campbell, 1969), defensores
del paradigma experimental, una evaluación estaba mejor realizada si seguía
^ rigurosidad de los diseños experimentales. Por otro lado, los defensores
 ^' enfoque naturalista a r g u m e n t a n que los métodos cualitativos servían
80                                                               EDUCACIÓN XXI


mejor a la evaluación. E incluso investigadores naturalistas como Parlett y
Hamilton (1978) y Guba y Lincoln (1981) negaban cualquier mérito de los
métodos experimentales o cuasi-experimentales aplicados a la evaluación.
Cronbach, en 1982, argumentaba que el uso de los métodos rigurosos lleva a
que una evaluación sea rígida y estrecha en su alcance. Estaba interesado en
incorporar la evaluación de programas a los procesos en los contextos y en
las organizaciones para facilitar una toma de decisiones plural.

    Las evaluaciones orientadas por los métodos han cobrado aún más fuerza
por ese largo debate entre los métodos de investigación cuantitativos y cuali-
tativos más adaptables a la evaluación. Estas diferentes perspectivas de la
evaluación han supuesto una contribución muy importante al desarrollo de
la Evaluación de programas, lográndose un gran consenso entre los evalua-
dores en torno a la idea de que una evaluación debe comprometerse con múl-
tiples valores y temas. Como consecuencia, la perspectiva tradicional, experi-
mentalista, ha constatado sus limitaciones en su alcance y ha evidenciado
sus dificultades en las situaciones en las cuales actúa la evaluación y que
requiere fijarse en múltiples aspectos. Sobre esto, Cook y Reichardt (1986)
advierten que el uso de múltiples metodologías conlleva mayor tiempo y
costo, y, por supuesto, una preparación adecuada. Cada uno de los enfoques
metodológicos tiene sus propias concepciones, su lógica y sus procedimien-
tos. Sin un esfuerzo hacia una fundamentación de por qué es positiva la com-
plementariedad metodológica, la defensa del uso de múltiples metodologías
en la evaluación puede no ser apoyada. Sin embargo, los modelos de evalua-
ción de programas que defienden la complementariedad metodológica como
los de Cronbach, Pérez Juste, Rossi y Freeman o Stuflebeam, aportan crite-
rios suficientes que muestran la conveniencia de esta complementariedad
metodológica dentro de sus propios modelos.

    El propio Cook (1985) ha adoptado una perspectiva postexperimental, de
"multiplicidad crítica", ya que defiende que la perspectiva del paradigma
experimental debe transformarse en otra más comprehensiva que se adapte
mejor a los aspectos políticos y organizativos de la evaluación de programas.
Cook, junto a sus colaboradores Shadish y otros, afirma que los evaluadores
deberían planificar sus evaluaciones previendo el uso de múltiples metodolo-
gías, investigar múltiples aspectos de los programas y considerar el punto de
vista de múltiples participantes. Defiende las ventajas de esta nueva perspec-
tiva sobre el paradigma experimental y considera que reduce las posibilida-
des de interpretación errónea, a la vez que proporciona una información más
comprehensiva, global e integradora para los procesos políticos, además de
favorecer una evaluación más racional y consciente de sus valores. E n los
primeros tiempos de su desarrollo, la Evaluación de programas tuvo dificul-
tades que no podían resolverse metodológicamente, debido a que u n a eva-
luación no puede realizarse sin limitaciones de tiempo y de recursos, y no
puede abarcar todas las opciones, y ello supone llegar a acuerdos que requie-
ren no sólo de unas metodologías, sino de más de un grupo de principios y de
LA TEORÍA DE LA EVALUACIÓN DE PROGRAMAS                                     81


teorías que guíen el proceso de evaluación de programas. Shadish y Cois.
(1986) dicen que el reto más importante que tiene planteada esa multiplici-
dad crítica es el desarrollo de la teoría evaluativa.

   El uso de una metodología u otra para la evaluación de un programa
dependerá de los propósitos de la evaluación, del estado de madurez del pro-
grama, de los recursos disponibles, de los intereses y necesidades de los
patrocinadores y de los evaluadores y del medio político y organizativo del
programa. De modo que, cuando un programa está desarrollándose, el estu-
diar su eficacia mediante un diseño experimental carece de sentido puesto
Que pasaría de puntillas sobre los procesos y los contextos; y utilizar los
niétodos cualitativos, en exclusividad, puede no ser lo más adecuado para
valorar la eficacia de un programa de amplio alcance, elaborado para apli-
carlo a toda la población de un país.

    Tantas discusiones sobre los métodos puede llevar a pensar que la solu-
ción a estos problemas se resolvería tras conseguir una mayor sofisticación
sn los métodos de investigación. El desarrollo de los métodos de investiga-
ción para la evaluación de programas ha sido fundamental, pero se necesita
una conceptualización y un esfuerzo teórico para sistematizar e integrar los
tactores conceptuales y los métodos de investigación para que avance la eva-
luación de programas y se consolide, aún más, como disciplina. (Chen,
1990:17). La teoría de programas debe proporcionar orientaciones para iden-
tificar qué temas son los más importantes en una evaluación, qué método o
tnétodos son los más relevantes, y sugerir cómo aplicar el método para alcan-
zar los objetivos propuestos en la evaluación.

    Chen y Rossi argumentan que las evaluaciones orientadas por el método
tienden a maximizar un tipo de validez en perjuicio de otras. Advierten de
estos problemas y señalan la importancia de la teoría de programas para
Jograr varios tipos de validez. Y tratan de resolverlo con su enfoque de Eva-
^f^aciones conducidas por la teoría (1981, 1983, 1987, 1989, 1992). Para Rossi
y Ereeman (1993), creadores del enfoque de Evaluación comprehensiva,
'adaptada y conducida por la teoría, toda evaluación debe centrarse en tres
tipos de actividades: 1) análisis relacionados con la conceptualización y dise-
co de las intervenciones, 2) asesoramiento para la realización del programa,
^) valoración de la utilidad del programa, sus efectos y la relación entre cos-
 os-eficacia. Debe recoger información conceptual, de las necesidades de los
programas sociales para planificar, redefinir, realizar y evaluar, procesual y
  e irnpacto, utilizando metodologías cuantitativas y cualitativas. El informe
 ^orienta a la utilidad, a dar respuesta a las necesidades sociales. Y la gene-
 ^hzación es aquella que permitan los diseños.

   Entre alguna de las ventajas de la realización de evaluaciones guiadas por
^teoría de programas está la de que la teoría permite comprobar si los resul-
  Qos del programa se deben a cómo se ejecuta el programa o se debe a la
82                                                                  EDUCACIÓN X X I


conceptualización propia del mismo. La teoría de programas ayuda a clarifi-
car si un programa está siendo desarrollado siguiendo los criterios explicita-
dos en el mismo y en las condiciones adecuadas. La teoría de programas
puede usarse para especificar los efectos intermedios de un programa que
podría llegar a evidenciar los aspectos positivos y negativos del mismo antes
de que los resultados finales puedan manifestarse, lo que proporcionaría
posibilidades de mejora del programa antes de que se haya concluido el pro-
grama.

   La incorporación de la teoría de programas en una evaluación fortalece la
información de los evaluadores para clarificar las metas del programa, para
observar los procesos y para atender las necesidades de los patrocinadores y
de los participantes y beneficiarios, y para orientarles en la realización de las
diferentes decisiones alternativas de mejora. Como disciplina, la evaluación
de programas debe desarrollar su propia teoría, y los métodos, en vez de ser
tratados como un fin en sí mismos, deben ser considerados como medios
para favorecer el desarrollo del conocimiento. Como dice Bickman (1987) la
evaluación es, a menudo, considerada como una ciencia práctica, pero es
ambas cosas, una práctica y una ciencia que requiere de su propia teoría.

    Actualmente, cuando el debate metodológico ha contribuido al desarrollo
de los métodos, se necesita un marco comprehensivo, general, teórico, que
vincule e integre las actividades de la evaluación a un nivel más general que
el que consiguen los distintos modelos de evaluación de programas. Porque,
a medida que se han desarrollado los modelos de evaluación de programas,
se ha ido t o m a n d o conciencia de que las intervenciones de los programas
sociales o educativos no trabajan, normalmente, de un modo predecible, y
que los problemas a resolver no son sencillos. Los que toman decisiones tam-
bién advierten que prefieren solucionar o reducir los problemas más que ini-
ciar cambios globales precipitados. Por ello, las evaluaciones que se centran
sólo en los resultados de los programas no son útiles, puesto que no infor-
man para tomar decisiones al no indicar en qué dirección, en qué aspectos y
de qué manera se debe incidir para conseguir mejores resultados.


     LA NATURALEZA DE LA TEORÍA DE LA EVALUACIÓN
     DE PROGRAMAS

   Un programa de intervención educativa o un programa de intervención
social supone un esfuerzo intencionado y organizado para intervenir en un
proceso social con el propósito de resolver un problema y proporcionar un
servicio. La estructuración de los esfuerzos organizados adecuadamente y
dirigidos a la consecución de las metas deseadas supone que el programa
opera bajo una teoría, aunque, a veces, esta teoría sea implícita. La teoría
está siempre implícita, o explícita, en la mente de los investigadores; y de los
L A TEORÍA DE LA EVALUACIÓN DE PROGRAMAS                                            83



evaluadores. La teoría explícita proporciona una guía general para la elabo-
ración del programa y explica cómo el programa organiza su funcionamien-
to, aunque puede verse influida por los prejuicios. La teoría, en la evaluación
de programas, debe estar explícita.

   La evaluación de programas es algo más que una metodología aplicada; la
evaluación es diversa en muchos modos y su potencialidad para la unidad
intelectual, que es lo que Scriven llama la lógica de la evaluación, podría
crear puentes entre la diversidad de evaluadores con el fin de desarrollar la
teoría de la evaluación de programas.

   Los intentos por mejorar la teoría de la evaluación de programas son anti-
guos. Weiss (1972) sugería que la utilización de los resultados de una evalua-
ción podría verse reforzada si se incluyeran estos elementos básicos:

    1. Un análisis de las premisas teóricas del programa.

   2. Una especificación de los procesos del programa para informar acerca
      de los vínculos entre los objetivos y las metas del programa.

   3. Un análisis de las realizaciones del programa y de sus resultados.

   4. Un informe detallado de cuáles son las alternativas más efectivas que
      pueden ayudar a mejorar el programa, y cómo realizarlas.

   Otra de las razones del movimiento para el desarrollo de la teoría de la
avaluación de programas se relaciona con la necesidad de comprender cómo
se realizan los tratamientos. Los estudios centrados en la realización de los
programas y en la intervención de los mismos proporcionan evidencias de
que la realización es algo muy complicado dentro del ámbito humano. Las
dificultades que se han revelado en la puesta en marcha y desarrollo de los
programas han señalado la necesidad de que los patrocinadores, los promo-
tores de un programa, presten atención a estos aspectos para mejorar la
•mplementación del programa. Es importante, por ello, que, dentro del desa-
rrollo del m a r c o teórico, se integre el desarrollo de los p r o g r a m a s en la
acción, como parte importante de la actividad evaluativa. Se trataría con ello
de evitar lo que a veces ocurre cuando se evalúan los programas, que quienes
realizan dichas evaluaciones tienden a proceder más según sus puntos de
V'sta y su preparación metodológica que en función de las necesidades reales
de ese programa, y esto no siempre es consistente con los objetivos de quie-
nes elaboran o diseñan un p r o g r a m a a d a p t a d o a u n a s necesidades p a r a
resolverlas.

   Por otra parte, las dificultades implícitas en la puesta en práctica de los
programas proporciona a los evaluadores grandes dificultades para desarro-
"ar sus estrategias y sus marcos conceptuales de modo que les permitieran
84                                                                   EDUCACIÓN XXi


hacer frente a estos problemas, y ciertamente en las Ciencias Sociales, y en
Educación, no pueden utilizarse los métodos de una manera estricta como,
por otra parte, se pueden utilizar en las Ciencias Físicas. En Educación, y en
Ciencias Sociales, los métodos de investigación no se pueden aplicar si no es
atendiendo a los propósitos, las circunstancias y contextos en los que se desa-
rrollan los programas.

    Desde el punto de vista conceptual los evaluadores no sólo deben infor-
m a r de la realización de sus evaluaciones, sino que deben trabajar con los
patrocinadores del programa para conocer y mejorar los modos de imple-
mentación de la realización de los programas, y, posteriormente, deben cola-
borar para mejorar el programa y su realización. Deben informar sobre los
cambios que se requiere hacer en el programa, qué criterios los fundamen-
tan, qué estrategias se deben planificar para lograrlos, quiénes deben realizar
los cambios y qué consecuencias, previsibles, y no previsibles, producirán las
modificaciones para la mejora (De la Orden, 1996).

    Chen, para argumentar su Teoría de evaluación de programas, toma una
idea de Weber. El desarrollo de la evaluación de programas y su emergencia
c o m o disciplina se ha visto beneficiada por el desarrollo de la sociedad
m o d e r n a , racionalista y contable. Sin e m b a r g o , Weber advertía que es
importante ver la diferencia entre dos tipos de racionalidad: la racionalidad
formal y la racionalidad sustantiva, o los valores. La racionalidad formal
tiene que ver con la eficiencia y la eficacia en la consecución de una meta
específica en un tiempo dado, mientras que la racionalidad de valor o sus-
tantiva se refiere a los propósitos sustantivos y fines a largo plazo de los indi-
viduos, de los grupos y de las sociedades.

    Cuando la racionalidad formal se dirige a una explicación parcial, estre-
cha, de las actividades sociales, los propósitos generales y las metas a largo
plazo se pierden de vista. El argumento de Weber es relevante para la con-
ceptualización de la evaluación de programas. Cuando su conceptualización
es estrecha y simplemente mide las metas conseguidas, el énfasis se pone en
la racionalidad formal, los evaluadores se interesan por la eficiencia y por la
eficacia del tratamiento, descuidando algo tan esencial c o m o la cuestión
sobre la adecuación de las metas a las necesidades y las consecuencias inten-
cionadas y no intencionadas a medio y largo plazo. Para evitar tales proble-
mas se necesita ampliar el marco conceptual de la evaluación de programas,
implicada más en la racionalidad sustantiva o de valor, que proporcione una
información más rica y real a los propósitos de los programas y a sus impli-
caciones en intereses sociales m á s amplios.

   Shadish, Cook y Levitón (1991: 31) defienden la necesidad de fundamen-
tar las teorías evaluativas en cinco componentes teóricos básicos. Son los
siguientes:
LAJEORIA DE LA EVALUACIÓN DE PROGRAMAS                                       85


   • Programación social. El componente relativo a la programación social
     tiene que ver con la naturaleza de los programas sociales y sus funcio-
     nes en la solución de los problemas sociales. Se relaciona con la estruc-
     tura interna y con el funcionamiento de los programas, con sus relacio-
     nes con las instituciones políticas y sus actividades y con los procesos a
     través de los cuales los programas y sus componentes pueden cambiar-
     se para mejorar el rendimiento de programa.

   • La construcción del conocimiento. Este componente se interesa por la
     comprensión de evidencia aceptable y los métodos para producir tal
     evidencia sobre el objeto que va a ser evaluado.

   • Los valores. El componente del valor está relacionado con el papel que
     los valores y los procesos de valoración juegan en la evaluación. Está
     relacionado con la elección de los valores que deben estar representa-
     dos en una evaluación y con la construcción de juicios de valor sobre
     los programas sociales.

   • La utilidad del conocimiento. El componente del uso, o utilidad, tiene
     que ver con el modo en que el conocimiento de las Ciencias Sociales y
     de la Educación puede ser utilizada en la política social y en los progra-
     mas. Está relacionado con los posibles modos de incrementar la utili-
     dad de los resultados de las evaluaciones.

   • La práctica evaluativa. El componente relacionado con la práctica eva-
     luativa tiene que ver con las actividades que el evaluador hace en su pro-
     fesión. Estudia el papel de los evaluadores en relación con los que reali-
     zan el programa, c ó m o decidir las cuestiones o preguntas claves, de
     dónde conseguir u obtener la información para elaborar y responder a
     tales cuestiones, y qué métodos se deben utilizar para priorizar las cues-
     tiones más relevantes y los temas sobre los cuales las dudas o las incerti-
     dumbres son mayores, así como conocer las posibilidades y limitaciones
     de tiempo, los recursos financieros, las destrezas del personal y las nor-
     mas para proceder a la realización de la evaluación (Cook y Shadish,
     1986, Shadish y Reichardt, 1987 en Shadish, Cook y Levitón, 1991:36).

    En u n a teoría de evaluación de programas, los criterios seleccionados
para juzgar la realización de u n programa claramente implican juicios de
j'alor. Temas claves relacionados con cómo diseñar un tratamiento o cómo
 levarlo a cabo, también implican juicios de valor Podemos decir que la teo-
J"ia, los valores, las propias .preferencias, e incluso los prejuicios, deben
nacerse explícitos. No cabe duda de que cualquier opción estará influida por
 a teoría - y por los prejuicios.

   No hay un único significado del término teoría universalmente aceptado,
'formalmente connota u n cuerpo de conocimientos que organiza, describe.
86                                                                   EDUCACIÓN XXi


prescribe, predice, explica con el fin de ayudar a la comprensión y al control
de los temas que estudia, aunque las teorías hacen esto de diferentes mane-
ras. No obstante, el significado del término teoría más aceptado es el que la
define como un grupo de concepciones interrelacionadas, principios o pro-
posiciones para explicar o guiar acciones sociales.

   Las teorías son de dos tipos: descriptivas y prescriptivas. El propósito de
las teorías llamadas descriptivas es describir y explicar un fenómeno, un
hecho. La teoría prescriptiva se relaciona con lo que se debe hacer o cómo
algo se puede hacer mejor. Las teorías descriptivas toman un grupo de condi-
ciones y métodos, o procedimientos, como dados, constantes, y tratan de
describir y explicar la probabilidad de los resultados, las metas, como varia-
bles de interés. En contraste, las teorías prescriptivas, y los principios pres-
criptivos se apoyan en unas condiciones y metas y prescriben los mejores
métodos, o procedimientos, como variables de interés, para conseguirlas.
(Reigeluth, 1983:20).




     Condiciones
     el Programa



                                                                Métodos del
                                                                 Programa




 1. Teorías descriptivas.
 2. Teorías prescriptivas


    La teoría de la evaluación de programas integra las dos naturalezas de la teo-
ría: la descriptiva y la prescriptiva. Las teorías prescriptivas incluyen las
siguientes características:

     1. Orientación a la acción,

     2. diseño del tratamiento y su realización, y

     3. un amplio rango de acciones para decidir sobre la elección de los crite-
        rios de valoración de los logros.
LA TEORÍA DE LA EVALUACIÓN DE PROGRAMAS                                                         87


   La teoría de la evaluación de programas es definida por Chen (1990) como
una especificación de lo que se debe hacer para conseguir las metas deseadas,
qué otros impactos o logros importantes pueden ser también anticipados, y
cómo estas metas y estos impactos pueden generarse.

    La primera parte de esta definición se relaciona con la teoría prescripti-
va, también llamada normativa -¿qué se debe h a c e r ? - y la segunda parte se
relaciona con la teoría descriptiva, también llamada causativa, en lo que
subyace a los mecanismos causales que relacionan los tratamientos del pro-
grama, los procesos de realización, los programas de tratamiento, los proce-
sos de implementación y las metas. Chen prefiere utilizar la terminología de
teoría normativa, en lugar de teoría prescriptiva, y teoría causativa, en vez
de teoría descriptiva. Ambas subteorías forman parte de la teoría de la eva-
luación de programas.

    El objetivo de las evaluaciones normativas es proporcionar información
para mejorar la estructura de los programas, los tratamientos, el medio en el
que se desarrollan y sus metas. Por otra parte, el principal objetivo de las eva-
luaciones causativas es valorar las relaciones entre los t r a t a m i e n t o s , los
medios en donde se realizan y los logros.

   La teoría normativa de la evaluación de programas debe proporcionar
guías sobre qué metas, o qué logros, deben intentar conseguirse y deben ser
examinados, y cómo debe diseñarse el tratamiento y planificarse su realiza-
ción. La teoría causativa especifica cómo trabaja el programa mediante la
identificación de las condiciones bajo las cuales ciertos procesos emergerán
y cuáles serán las consecuencias (Chen, 1990: 43).

    La teoría normativa procede examinando las premisas, las concepciones,
los procedimientos, o el conocimiento previo. Además, proporciona una jus-
tificación para la estructura y actividades del programa, guía la planifica-
ción, la formulación y la realización del programa. De otro lado, la teoría
causativa para la evaluación de programas se basa en la experiencia; repre-
senta el conocimiento empírico, busca las relaciones causales entre los trata-
mientos y los resultados. Una teoría causativa especifica los mecanismos
causales que vinculan, median o condicionan las relaciones de causa-efecto
entre las variables de tratamiento (variables independientes) y los logros del
programa (variables dependientes).

    Al interesarse y preocuparse por los problemas del día a día del programa,
el evaluador se sensibiliza hacia las necesidades de la gente que aplica el pro-
grama y potencia la utilización de los resultados evaluativos al no perder el
objetivo h u m a n o de las necesidades de quienes trabajan en el programa.
Además, los p a t r o c i n a d o r e s y p r o m o t o r e s de los p r o g r a m a s necesitan la
información a tiempo para actuar y tomar decisiones eficaces.
88                                                               EDUCACIÓN XXI

    La evaluación desde la teoría normativa requiere de la consistencia entre
la estructura teórica del programa y la estructura de ñancionamiento del pro-
grama para ser valorada. Esto puede realizarse en un estadio temprano del
desarrollo del programa, que proporcionará información para diagnosticar
pronto los problemas a tiempo y realizar acciones para tratar de que estos
problemas se subsanen, fortaleciendo la estructura del programa y/o los pro-
cesos de realización.

   Cuando el tratamiento de u n programa es construido y ejecutado adecua-
damente, la credibilidad del programa se potencia. No obstante, esto no lleva
implícito que el programa sea eficaz. La evaluación del programa, desde la
teoría normativa, es insuficiente, por sí misma, para comprender si el pro-
grama consigue las metas para las cuales ha sido diseñado o para conocer las
consecuencias no intencionadas del programa. Para comprender la eficacia
del programa, la teoría causativa es importante y necesaria.

   Una evaluación que se rige por la teoría causativa proporciona informa-
ción sobre el impacto generado por el programa y sobre cómo dichos impac-
tos fueron generados. El valor de un programa es muy difícil de juzgar sin
tener información sobre factores de contexto o de intervención que ayuden a
conocer por qué un programa tiene éxito o fracasa.

    La especificación de la teoría causativa en una evaluación es especialmen-
te útil para la mejora futura del programa. Cuando la teoría causativa es pro-
yectada en detalle, la evaluación puede conocer las debilidades de los meca-
nismos causales que subyacen en el p r o g r a m a , identificar los factores
contextúales e intervinientes que dificultan o facilitan los procesos del pro-
grama y sus resultados, y sugerir posibles estrategias para ocuparse de mejo-
rar sus programas e introducir los cambios necesarios para ello. Ambas teo-
rías, normativa y causativa, son necesarias y constituyen las dos subteorías
de la teoría de la evaluación de programas.
LA TEORÍA DE LA EVALUACIÓN DE PROGRAMAS                                             89

                                 BIBLIOGRAFÍA

ALKIN, M.C. (1969)."Evaluation theory         CRONBACH, L.J. (1982). Designing eva-
   development", £va/MaíioM Comtnent,            luations of educational and social pro-
   2, 1.                                         grams. San Francisco: Jossey-Bass.
BICKMAN, L. (Ed.) (1987). Using pro-          CRONBACH, L.J., AMBRON, S.R., DORN-
   gramm theroy in evaluation. San               BUSCH, S.M., HESS, R.D. HORNIK,
   Francisco: Jossey-Bass.                       R.C. PHILLIPS, D.C., WALKER, D.F. y
CAMPBELL, D.T. y STANLEY, J.C (1963).            WEINER, S.S.(1980). Toward reform
   Experimental and quasi-experimental           of program evaluation. San Francisco,
   designs for research. Chicago, ILL.:          CA: Josey-Bass.
   Rand-McNally (1 ed. 1963). (Traduci-       CRONBACH, L.J. y SUPPES, R (Eds.)
   do al castellano: Diseños experimenta-        (1969). Research for tomorrow's scho-
   les y cuasi-experimentales en la inves-       ols: disciplined inquiry for education.
   tigación social. Buenos Aires:                New York: Macmillan.
   Amorrortu. 1970.                           DE LA ORDEN, A. (1996). "Evaluación,
CHELINSKY, E. y SHADISH, W.R.                    innovación y calidad educativa". XI
   (1997). Evaluation for the 21" Century.       Congreso Nacional de Pedagogía:
   Thousand Oaks, CA.: Sage.                     Innovación pedagógica y políticas
CHEN, H-T.(1990). Theory-driven evalua-          educativas. San Sebastián: Sociedad
   tion. Newbury Park:Sage.                      Española de Pedagogía y Universidad
CHEN, H-T. y ROSSI,P.H. (1981). The              del País Vasco.
   multi-goal, theory-driven approach to      FETTERMAN, D. M. (1992). "Theory in
   evaluation: a model linking basic and         evaluation: we think, therefore we
                                                 theorize (An etnographer's perspecti-
   applied social science. Social Forces,
                                                 va)". En H-t Chen y P. H. Rossi: O.c.
   59: 106-112.
                                              FULLAN, M. (1994). Change forces. Pro-
CHEN, H-T y ROSSI,RH. (1983). Eva-               bing the depths of Evaluational
   luating with sense: The Theory-driven         Reform. Bristol: Palmer Press.
   approach. Evaluation Review,7, 106-        GUBA, E.G. y LINCOLN, I.S. (1981).
    122.                                         Efjéctive evaluation. San Francisco,
CHEN, H-T y ROSSI.RH. (1989). Issues             Washington, London: Jossey Bass.
   in theory-driven perspective. Evalua-      GUBA, E.G. y LINCOLN, I.S. (1989).
   tion and Program Planning, 12, 299-           Fourth generation evaluation. Lon-
   306.                                          don: Sage.
CHEN, H-T y ROSSLPH. (Eds.) (1992).           HOUSE, E.R. (Edit.) (1986). New direc-
   Using theory to improve program and           tionsin educational evaluation. Lon-
  policy evaluation. New York, London:           don: Palmer Press.
   Grenwood Press.                            LINCOLN, Y.S. (1985). Organizational
COOK, T.D. y CAMPBELL, D.T. (1969).              theory and inquiry. London: Sage.
   Quasi-experimentation: Designs and         LINCOLN, I.S. y GUBA, E.G. (1985).
   analysis issues for field settings. Chi-      Naturalistic inquiry. Beverly Hills,
   cago, ILL.: Rand-McNally.                     CA: Sage.
COOK, T.D. y REICHARDT, CH. S.                LINCOLN, Y.S. y GUBA, E.G. (1986). "But
   (1986). Métodos cualitativos y cuanti-        is it rigurous? Trustworthiness and
   tativos en investigación educativa.           authenticity in naturalistic evalua-
   Madrid: Morata.                               tion", (73-78), En D.D.Williams (Ed.):
CRONBACH, L.J. (1973). "Remarks to               Naturalistic evaluation. New directions
   the new society". Evaluation Research         for program evaluation, 30, San Fran-
   Society Newsletter, 1,1, (1-3).               cisco: Jossey-Bass.
90                                                                            EDUCACIÓN X X I


LIPSEY, M.W. y POLLARD.J.A. (1989).             SHADISH, W.R. y REICHARDT, C.S.
   "Driving toward theory in program               (1987). Evaluation       Sludies    Review
   evaluation: more models to choose              Annual. Newbury Park, CA: Sage.
   from". Evaluation and Program Plan-          SHADISH, W.R. COOK, TD. y LEVITÓN,
   ning. 12,317-328.                               L.C. (1991). Foundations of program
MARTÍNEZ MEDIANO, C. (1993). Facto-               evaluation: Theories of practice. New-
   res de eficacia de los Centros Asociados        bury Park, CA: Sage.
   de la UNED. Madrid: ICI-AIESAD-              STAKE, R.E. (1967). The counlenance of
   UNED.                                          educational evaluation. Teachers Colle-
MARTÍNEZ MEDIANO, C. (1996). "Inves-               ge Record. 68, (523-540).
   tigación evaluativa sobre los factores       STAKE, R.E. (1975). Programm evalua-
   de eficacia de los Centros Asociados de         tion, particularly responsive evaluation.
   la UNED". Revista Iberoamericana de             Occasional Paper Series, 5. Uni-versity
   Educación superior a Distancia. AIE-            of Western Michigan. Evaluation Can-
   SAD, Vol. VIII, 1.25-50.                        ter.
MARTÍNEZ MEDIANO, C. (1997). Eva-               STAKE, R.E. (1980). "Program evaluation,
   luación de programas           educativos.
                                                   particularly responsive evaluation". En
   Investigación evaluativa. Modelos de
                                                   W.B.Dickrell y D.Hamilton (Eds.), Re-
   evaluación de programas.         Madrid:
                                                   thinking educational research, (Jl-Kl),
   UNED, CU. 159.
                                                   London: Hodder and Stoughton.
PARLETT,M.R. y HAMILTON, D. (1978).
                                                STAKE, R.E. (1990). "Responsive evalua-
   Evaluation     as illumnation:   A new
                                                   tion". En H.G. Walberg y G.D. Haertel
   approach to the study ofinnovative pro-
                                                   (Eds.): The Inteniational     Encyclopedia
   grammes. Occasional paper, 9, Centre
                                                  of Educational       Evaluation.    Oxford,
   for Research in the Educational Scien-
   ces. University of Edinburgh. 1972.             New York: Pergamon Press, (75-77).
                                                SUCHMAN, E.A (1967). Evaluation rese-
PATTON, M.Q. (1980). Qualitative evalua-
   tion and research methods. Newbury             arch: Principies and practice in public
   Park, CA: Sage. (ed rev.1990).                 service and social action         programs.
PÉREZ JUSTE, R. (1992). Evaluación de              New York: Russell Sage Foundation.
   programas de orientación. V Semina-          WEISS, C H . (1972). Evaluation research:
   rio Iberoamericano de Orientación.              Methods for assessing program effective-
   Actas AEOEP y Departamento MIDE.                mess. Englewood Cliffs,NJ: Prentice-
   (46-66).                                        Hall.
PÉREZ JUSTE, R., MARTÍNEZ MEDIA-                WEISS, C H . (1972). "Evaluating educa-
   NO, C. y RODRÍGUEZ GÓMEZ, G.                    tional and social programms: A treefui
   (1994). Centros educativos de calidad.          of owls". En CH.Weiss (Ed.): Evalua-
   Madrid: ITE.CECE.                               ting actions programs: Readings in
REIGELUTH, CH. M. (1983). "Instruc-               social action and education. (3-27).
   tional Design: What is it and why is            Boston: Allyn and Bacon.
   it?" (3-36). En: C.M. Reigeluth (Ed.).       WEISS, C H . (1975). Investigación evalua-
   Instructional-Design. Theories and              tiva: Métodos para determinar            la
   Models: An overview of their current           eficiencia de los programas en acción.
   status. Hillsdale. N.J. London: Law-            México: Trillas.
   rence E r l b a u m Associates, Publis-      WEISS, C H . y BUCUVALAS, M.J. (1989).
   hers. 487 pp.                                   "Truth tests and utility tests: Decision-
ROSSI, P H . y FREEMAN, H.E. (1993).               makers'frame of reference for social
   Evaluation: A systematic approach. (5a          science research". En H.E.Freeman y
   ed.). Newbury Park, CA: Sage.                   M.A.Solomon (Eds.). Evaluation stu-
SCRIVEN, M. (1991). Evaluation thesau-             dies review a n n u a l , 6,(695-706).
   rus. Newbury Park, CA: Sage.                    Beverly Hills, CA: Sage.
LA IEORÍA DE LA EVALUACIÓN DE PROGRAMAS                                        91




                                     RESUMEN
  En este trabajo sobre La teoría de la evaluación de programas comenza-
  mos realizando una revisión de la situación actual de la evaluación como
  disciplina de conocimiento, mencionando sus elementos constitutivos,
  para centramos, a continuación, en la evolución que ha seguido la disci-
  plina de la Evaluación de programas, volcada en un primer momento en
  los métodos de investigación contribuyendo a su desarrollo adaptado a la
  problemática evaluativa y, posteriormente, en el desarrollo de la teoría de la
  evaluación de programas, fundamental en toda disciplina científica, que
  orienta la elaboración de los programas sociales y educativos, clarifica los
  procesos y las metas de la evaluación, comprueba su realización práctica y
  resultados, asesora en la mejora de los programas y contribuye, en definiti-
  va, a la construcción del conocimiento.


  Palabras clave: Teoría de la evaluación de programas. Evaluación como
  disciplina de conocimiento. Métodos de investigación adaptados a la
  evaluación de programas.




                                    ABSTRACT
  This paper is about Program Evaluation Theory. It shows, at the
  beginning, an overview on Evaluation as knowledge discipline, analyzing
  their constitutive elements. Then, we focus on the development of Pro-
  gram Evaluation, with one special interest, in the 60's, on research me-
  thods, with one important contribution to develop appropriate methods to
  the special evaluation questions and issues, and in the 80's involved on
  the development of Program Theory, one of the elements constitutive of the
  knowledge discipline, to guide the construction of social and educative
  programs, its goals, its implementation and outcomes, and to guide the
  decisión making, to change and improve programs, and thus, to
  contribute to the construction of knowledge.


  Key words: Program Evaluation Theory. Evaluation as knowledge disci-
  pline. Research methods appropriate to program evaluation.

Mais conteúdo relacionado

Mais procurados

Método holístico de evaluación
Método holístico  de evaluaciónMétodo holístico  de evaluación
Método holístico de evaluaciónSol Segura
 
Modelos de evaluación institucional
Modelos de evaluación institucionalModelos de evaluación institucional
Modelos de evaluación institucionalelvia72
 
La evaluación iluminativa (1) (1)
La evaluación iluminativa (1) (1)La evaluación iluminativa (1) (1)
La evaluación iluminativa (1) (1)cotrino11
 
La evaluación cualitativa en educación. Jurjo Torres Santomé (1987)
La evaluación cualitativa en educación. Jurjo Torres Santomé (1987)La evaluación cualitativa en educación. Jurjo Torres Santomé (1987)
La evaluación cualitativa en educación. Jurjo Torres Santomé (1987)Jurjo Torres Santomé
 
Cuadro compartivo-autores-Evaluación - Curricular
Cuadro compartivo-autores-Evaluación - CurricularCuadro compartivo-autores-Evaluación - Curricular
Cuadro compartivo-autores-Evaluación - CurricularEnith Martínez Galmich
 
Modelos de la evaluacion educativa
Modelos de la evaluacion educativaModelos de la evaluacion educativa
Modelos de la evaluacion educativaVero Cortes
 
La evaluación educativa modelos
La evaluación educativa   modelos La evaluación educativa   modelos
La evaluación educativa modelos Yoly QC
 
Evaluación curricular y del aprendizaje iluminativa
Evaluación curricular y del aprendizaje iluminativa Evaluación curricular y del aprendizaje iluminativa
Evaluación curricular y del aprendizaje iluminativa Alex Lugo Reyes
 
Trabajo de evaluacion de proyectos
Trabajo de evaluacion de proyectosTrabajo de evaluacion de proyectos
Trabajo de evaluacion de proyectosKarla Rojas
 
Modelos de evaluación curricular compendio
Modelos de evaluación curricular compendioModelos de evaluación curricular compendio
Modelos de evaluación curricular compendiositton29
 
Metodos Y Modelos Alternativos De Evaluacion ( Windows 97)
Metodos Y  Modelos  Alternativos De  Evaluacion ( Windows 97)Metodos Y  Modelos  Alternativos De  Evaluacion ( Windows 97)
Metodos Y Modelos Alternativos De Evaluacion ( Windows 97)guestf0703e
 
Tarea 4 Presentación Slideshare: Modelos de Evaluacion
Tarea 4 Presentación Slideshare: Modelos de EvaluacionTarea 4 Presentación Slideshare: Modelos de Evaluacion
Tarea 4 Presentación Slideshare: Modelos de EvaluacionPsicovision Y Salud
 
Presentación del cuadro comparativo del perfeccionismo
Presentación del cuadro comparativo del perfeccionismoPresentación del cuadro comparativo del perfeccionismo
Presentación del cuadro comparativo del perfeccionismoVíctor Manuel García Fermín
 
Modelo educativo democratico de Macdonald
Modelo educativo democratico de MacdonaldModelo educativo democratico de Macdonald
Modelo educativo democratico de MacdonaldDeivis Torres
 
Evaluación iluminativa
Evaluación iluminativaEvaluación iluminativa
Evaluación iluminativaPablo Samsa
 
historia de wikipedia
historia de wikipediahistoria de wikipedia
historia de wikipedianauj1777
 

Mais procurados (19)

Método holístico de evaluación
Método holístico  de evaluaciónMétodo holístico  de evaluación
Método holístico de evaluación
 
Modelos de evaluación institucional
Modelos de evaluación institucionalModelos de evaluación institucional
Modelos de evaluación institucional
 
La evaluación iluminativa (1) (1)
La evaluación iluminativa (1) (1)La evaluación iluminativa (1) (1)
La evaluación iluminativa (1) (1)
 
La evaluación cualitativa en educación. Jurjo Torres Santomé (1987)
La evaluación cualitativa en educación. Jurjo Torres Santomé (1987)La evaluación cualitativa en educación. Jurjo Torres Santomé (1987)
La evaluación cualitativa en educación. Jurjo Torres Santomé (1987)
 
Cuadro compartivo-autores-Evaluación - Curricular
Cuadro compartivo-autores-Evaluación - CurricularCuadro compartivo-autores-Evaluación - Curricular
Cuadro compartivo-autores-Evaluación - Curricular
 
Modelos de la evaluacion educativa
Modelos de la evaluacion educativaModelos de la evaluacion educativa
Modelos de la evaluacion educativa
 
La evaluación educativa modelos
La evaluación educativa   modelos La evaluación educativa   modelos
La evaluación educativa modelos
 
Modelos de evaluación
Modelos de evaluaciónModelos de evaluación
Modelos de evaluación
 
Evaluación curricular y del aprendizaje iluminativa
Evaluación curricular y del aprendizaje iluminativa Evaluación curricular y del aprendizaje iluminativa
Evaluación curricular y del aprendizaje iluminativa
 
Trabajo de evaluacion de proyectos
Trabajo de evaluacion de proyectosTrabajo de evaluacion de proyectos
Trabajo de evaluacion de proyectos
 
Modelos de evaluación curricular compendio
Modelos de evaluación curricular compendioModelos de evaluación curricular compendio
Modelos de evaluación curricular compendio
 
Modelos
ModelosModelos
Modelos
 
La evaluación en la educación
La evaluación en la educaciónLa evaluación en la educación
La evaluación en la educación
 
Metodos Y Modelos Alternativos De Evaluacion ( Windows 97)
Metodos Y  Modelos  Alternativos De  Evaluacion ( Windows 97)Metodos Y  Modelos  Alternativos De  Evaluacion ( Windows 97)
Metodos Y Modelos Alternativos De Evaluacion ( Windows 97)
 
Tarea 4 Presentación Slideshare: Modelos de Evaluacion
Tarea 4 Presentación Slideshare: Modelos de EvaluacionTarea 4 Presentación Slideshare: Modelos de Evaluacion
Tarea 4 Presentación Slideshare: Modelos de Evaluacion
 
Presentación del cuadro comparativo del perfeccionismo
Presentación del cuadro comparativo del perfeccionismoPresentación del cuadro comparativo del perfeccionismo
Presentación del cuadro comparativo del perfeccionismo
 
Modelo educativo democratico de Macdonald
Modelo educativo democratico de MacdonaldModelo educativo democratico de Macdonald
Modelo educativo democratico de Macdonald
 
Evaluación iluminativa
Evaluación iluminativaEvaluación iluminativa
Evaluación iluminativa
 
historia de wikipedia
historia de wikipediahistoria de wikipedia
historia de wikipedia
 

Destaque

Buomarino, productos artesanales para el cuidado de la piel sigueme en http:/...
Buomarino, productos artesanales para el cuidado de la piel sigueme en http:/...Buomarino, productos artesanales para el cuidado de la piel sigueme en http:/...
Buomarino, productos artesanales para el cuidado de la piel sigueme en http:/...★ Carlos L. Urbina
 
Smartphones: Blackberry Torch, Samsung Galaxy y más
Smartphones: Blackberry Torch, Samsung Galaxy y másSmartphones: Blackberry Torch, Samsung Galaxy y más
Smartphones: Blackberry Torch, Samsung Galaxy y másHernan Huerta Figueroa
 
trabajo de estadistica2
trabajo de estadistica2trabajo de estadistica2
trabajo de estadistica2juniro111
 
Imagen Verbal
Imagen VerbalImagen Verbal
Imagen Verbalwi11i
 
Ruta Libre
Ruta LibreRuta Libre
Ruta Libredavidylu
 
Mac Donald´s Responsabilidad Social
Mac Donald´s Responsabilidad SocialMac Donald´s Responsabilidad Social
Mac Donald´s Responsabilidad Socialgsenra08
 
GRUPOD_APLICINFO_07
GRUPOD_APLICINFO_07GRUPOD_APLICINFO_07
GRUPOD_APLICINFO_07GabrielaLuna
 
3Com NBX100
3Com NBX1003Com NBX100
3Com NBX100savomir
 
3Com 3C10226PE / 655-0114
3Com 3C10226PE / 655-01143Com 3C10226PE / 655-0114
3Com 3C10226PE / 655-0114savomir
 
3Com 3C94403CH
3Com 3C94403CH3Com 3C94403CH
3Com 3C94403CHsavomir
 

Destaque (20)

Inicio de clases FEPIP
Inicio de clases FEPIPInicio de clases FEPIP
Inicio de clases FEPIP
 
Buomarino, productos artesanales para el cuidado de la piel sigueme en http:/...
Buomarino, productos artesanales para el cuidado de la piel sigueme en http:/...Buomarino, productos artesanales para el cuidado de la piel sigueme en http:/...
Buomarino, productos artesanales para el cuidado de la piel sigueme en http:/...
 
Smartphones: Blackberry Torch, Samsung Galaxy y más
Smartphones: Blackberry Torch, Samsung Galaxy y másSmartphones: Blackberry Torch, Samsung Galaxy y más
Smartphones: Blackberry Torch, Samsung Galaxy y más
 
trabajo de estadistica2
trabajo de estadistica2trabajo de estadistica2
trabajo de estadistica2
 
Imagen Verbal
Imagen VerbalImagen Verbal
Imagen Verbal
 
Cronica fotografica
Cronica fotograficaCronica fotografica
Cronica fotografica
 
Sistema endocrino
Sistema endocrinoSistema endocrino
Sistema endocrino
 
EFEMERIDES
EFEMERIDESEFEMERIDES
EFEMERIDES
 
Pei[1]
Pei[1]Pei[1]
Pei[1]
 
Ruta Libre
Ruta LibreRuta Libre
Ruta Libre
 
Mac Donald´s Responsabilidad Social
Mac Donald´s Responsabilidad SocialMac Donald´s Responsabilidad Social
Mac Donald´s Responsabilidad Social
 
Base de datos
Base de datosBase de datos
Base de datos
 
Base de datos
Base de datosBase de datos
Base de datos
 
Wp4 uaa-2010
Wp4 uaa-2010Wp4 uaa-2010
Wp4 uaa-2010
 
GRUPOD_APLICINFO_07
GRUPOD_APLICINFO_07GRUPOD_APLICINFO_07
GRUPOD_APLICINFO_07
 
3Com NBX100
3Com NBX1003Com NBX100
3Com NBX100
 
Juegos
JuegosJuegos
Juegos
 
3Com 3C10226PE / 655-0114
3Com 3C10226PE / 655-01143Com 3C10226PE / 655-0114
3Com 3C10226PE / 655-0114
 
Necesitamos
NecesitamosNecesitamos
Necesitamos
 
3Com 3C94403CH
3Com 3C94403CH3Com 3C94403CH
3Com 3C94403CH
 

Semelhante a Teoría de la evaluación de programas

Concepto de evaluación
Concepto de evaluaciónConcepto de evaluación
Concepto de evaluacióncultuver
 
Resumen tema 2 carolina
Resumen  tema 2 carolinaResumen  tema 2 carolina
Resumen tema 2 carolinaCarolina
 
la evaluacion-educativa.__concepto-periodos_y_modelos
la evaluacion-educativa.__concepto-periodos_y_modelosla evaluacion-educativa.__concepto-periodos_y_modelos
la evaluacion-educativa.__concepto-periodos_y_modelosPablo Quezadac
 
EVALUACIÓN DE APRENDIZAJE
EVALUACIÓN DE APRENDIZAJEEVALUACIÓN DE APRENDIZAJE
EVALUACIÓN DE APRENDIZAJEUTP
 
Evaluac ión 7
Evaluac ión 7Evaluac ión 7
Evaluac ión 7Adalberto
 
Generaciones de la evaluación
Generaciones de la evaluaciónGeneraciones de la evaluación
Generaciones de la evaluaciónAngelin Antunez
 
Evaluac ión 7
Evaluac ión 7Evaluac ión 7
Evaluac ión 7Adalberto
 
Evaluac ión 7
Evaluac ión 7Evaluac ión 7
Evaluac ión 7Adalberto
 
Evaluac ión 7
Evaluac ión 7Evaluac ión 7
Evaluac ión 7Adalberto
 
La evaluación educativa modelos
La evaluación educativa   modelos La evaluación educativa   modelos
La evaluación educativa modelos Cesar Yupa
 
La evaluación educativa modelos
La evaluación educativa   modelos La evaluación educativa   modelos
La evaluación educativa modelos Mary Tenelema
 
La evaluación educativa modelos-periodos
La evaluación educativa   modelos-periodosLa evaluación educativa   modelos-periodos
La evaluación educativa modelos-periodosLiliana Charco
 
La evaluación educativa modelos
La evaluación educativa   modelos La evaluación educativa   modelos
La evaluación educativa modelos Liliana Charco
 
La evaluación educativa modelos
La evaluación educativa   modelos La evaluación educativa   modelos
La evaluación educativa modelos Inés Rosero
 
La evaluación educativa modelos
La evaluación educativa   modelos La evaluación educativa   modelos
La evaluación educativa modelos Doris Aguagallo
 

Semelhante a Teoría de la evaluación de programas (20)

Concepto de evaluación
Concepto de evaluaciónConcepto de evaluación
Concepto de evaluación
 
Evaluación
EvaluaciónEvaluación
Evaluación
 
Resumen tema 2 carolina
Resumen  tema 2 carolinaResumen  tema 2 carolina
Resumen tema 2 carolina
 
Evalapreneducmed
EvalapreneducmedEvalapreneducmed
Evalapreneducmed
 
Evaluacion
EvaluacionEvaluacion
Evaluacion
 
la evaluacion-educativa.__concepto-periodos_y_modelos
la evaluacion-educativa.__concepto-periodos_y_modelosla evaluacion-educativa.__concepto-periodos_y_modelos
la evaluacion-educativa.__concepto-periodos_y_modelos
 
EVALUACIÓN DE APRENDIZAJE
EVALUACIÓN DE APRENDIZAJEEVALUACIÓN DE APRENDIZAJE
EVALUACIÓN DE APRENDIZAJE
 
Modelo de evaluacion
Modelo de evaluacionModelo de evaluacion
Modelo de evaluacion
 
Modulo5 Evaluaciòn Institucional
Modulo5  Evaluaciòn InstitucionalModulo5  Evaluaciòn Institucional
Modulo5 Evaluaciòn Institucional
 
Evaluac ión 7
Evaluac ión 7Evaluac ión 7
Evaluac ión 7
 
Generaciones de la evaluación
Generaciones de la evaluaciónGeneraciones de la evaluación
Generaciones de la evaluación
 
Evaluac ión 7
Evaluac ión 7Evaluac ión 7
Evaluac ión 7
 
Evaluac ión 7
Evaluac ión 7Evaluac ión 7
Evaluac ión 7
 
Evaluac ión 7
Evaluac ión 7Evaluac ión 7
Evaluac ión 7
 
La evaluación educativa modelos
La evaluación educativa   modelos La evaluación educativa   modelos
La evaluación educativa modelos
 
La evaluación educativa modelos
La evaluación educativa   modelos La evaluación educativa   modelos
La evaluación educativa modelos
 
La evaluación educativa modelos-periodos
La evaluación educativa   modelos-periodosLa evaluación educativa   modelos-periodos
La evaluación educativa modelos-periodos
 
La evaluación educativa modelos
La evaluación educativa   modelos La evaluación educativa   modelos
La evaluación educativa modelos
 
La evaluación educativa modelos
La evaluación educativa   modelos La evaluación educativa   modelos
La evaluación educativa modelos
 
La evaluación educativa modelos
La evaluación educativa   modelos La evaluación educativa   modelos
La evaluación educativa modelos
 

Último

DETALLES EN EL DISEÑO DE INTERIOR
DETALLES EN EL DISEÑO DE INTERIORDETALLES EN EL DISEÑO DE INTERIOR
DETALLES EN EL DISEÑO DE INTERIORGonella
 
IV SES LUN 15 TUTO CUIDO MI MENTE CUIDANDO MI CUERPO YESSENIA 933623393 NUEV...
IV SES LUN 15 TUTO CUIDO MI MENTE CUIDANDO MI CUERPO  YESSENIA 933623393 NUEV...IV SES LUN 15 TUTO CUIDO MI MENTE CUIDANDO MI CUERPO  YESSENIA 933623393 NUEV...
IV SES LUN 15 TUTO CUIDO MI MENTE CUIDANDO MI CUERPO YESSENIA 933623393 NUEV...YobanaZevallosSantil1
 
TUTORIA II - CIRCULO DORADO UNIVERSIDAD CESAR VALLEJO
TUTORIA II - CIRCULO DORADO UNIVERSIDAD CESAR VALLEJOTUTORIA II - CIRCULO DORADO UNIVERSIDAD CESAR VALLEJO
TUTORIA II - CIRCULO DORADO UNIVERSIDAD CESAR VALLEJOweislaco
 
Actividad transversal 2-bloque 2. Actualización 2024
Actividad transversal 2-bloque 2. Actualización 2024Actividad transversal 2-bloque 2. Actualización 2024
Actividad transversal 2-bloque 2. Actualización 2024Rosabel UA
 
4º SOY LECTOR PART2- MD EDUCATIVO.p df PARTE
4º SOY LECTOR PART2- MD  EDUCATIVO.p df PARTE4º SOY LECTOR PART2- MD  EDUCATIVO.p df PARTE
4º SOY LECTOR PART2- MD EDUCATIVO.p df PARTESaraNolasco4
 
Mapa Mental de estrategias de articulación de las areas curriculares.pdf
Mapa Mental de estrategias de articulación de las areas curriculares.pdfMapa Mental de estrategias de articulación de las areas curriculares.pdf
Mapa Mental de estrategias de articulación de las areas curriculares.pdfvictorbeltuce
 
Manejo del Dengue, generalidades, actualización marzo 2024 minsa
Manejo del Dengue, generalidades, actualización marzo 2024 minsaManejo del Dengue, generalidades, actualización marzo 2024 minsa
Manejo del Dengue, generalidades, actualización marzo 2024 minsaLuis Minaya
 
Contextualización y aproximación al objeto de estudio de investigación cualit...
Contextualización y aproximación al objeto de estudio de investigación cualit...Contextualización y aproximación al objeto de estudio de investigación cualit...
Contextualización y aproximación al objeto de estudio de investigación cualit...Angélica Soledad Vega Ramírez
 
Presentación de Estrategias de Enseñanza-Aprendizaje Virtual.pptx
Presentación de Estrategias de Enseñanza-Aprendizaje Virtual.pptxPresentación de Estrategias de Enseñanza-Aprendizaje Virtual.pptx
Presentación de Estrategias de Enseñanza-Aprendizaje Virtual.pptxYeseniaRivera50
 
periodico mural y sus partes y caracteristicas
periodico mural y sus partes y caracteristicasperiodico mural y sus partes y caracteristicas
periodico mural y sus partes y caracteristicas123yudy
 
05 Fenomenos fisicos y quimicos de la materia.pdf
05 Fenomenos fisicos y quimicos de la materia.pdf05 Fenomenos fisicos y quimicos de la materia.pdf
05 Fenomenos fisicos y quimicos de la materia.pdfRAMON EUSTAQUIO CARO BAYONA
 
Tema 8.- Gestion de la imagen a traves de la comunicacion de crisis.pdf
Tema 8.- Gestion de la imagen a traves de la comunicacion de crisis.pdfTema 8.- Gestion de la imagen a traves de la comunicacion de crisis.pdf
Tema 8.- Gestion de la imagen a traves de la comunicacion de crisis.pdfDaniel Ángel Corral de la Mata, Ph.D.
 
MODELO DE INFORME DE INDAGACION CIENTIFICA .docx
MODELO DE INFORME DE INDAGACION CIENTIFICA .docxMODELO DE INFORME DE INDAGACION CIENTIFICA .docx
MODELO DE INFORME DE INDAGACION CIENTIFICA .docxRAMON EUSTAQUIO CARO BAYONA
 
Fichas de Matemática TERCERO DE SECUNDARIA.pdf
Fichas de Matemática TERCERO DE SECUNDARIA.pdfFichas de Matemática TERCERO DE SECUNDARIA.pdf
Fichas de Matemática TERCERO DE SECUNDARIA.pdfssuser50d1252
 
Estas son las escuelas y colegios que tendrán modalidad no presencial este lu...
Estas son las escuelas y colegios que tendrán modalidad no presencial este lu...Estas son las escuelas y colegios que tendrán modalidad no presencial este lu...
Estas son las escuelas y colegios que tendrán modalidad no presencial este lu...fcastellanos3
 
Estrategias de enseñanza - aprendizaje. Seminario de Tecnologia..pptx.pdf
Estrategias de enseñanza - aprendizaje. Seminario de Tecnologia..pptx.pdfEstrategias de enseñanza - aprendizaje. Seminario de Tecnologia..pptx.pdf
Estrategias de enseñanza - aprendizaje. Seminario de Tecnologia..pptx.pdfAlfredoRamirez953210
 

Último (20)

DETALLES EN EL DISEÑO DE INTERIOR
DETALLES EN EL DISEÑO DE INTERIORDETALLES EN EL DISEÑO DE INTERIOR
DETALLES EN EL DISEÑO DE INTERIOR
 
IV SES LUN 15 TUTO CUIDO MI MENTE CUIDANDO MI CUERPO YESSENIA 933623393 NUEV...
IV SES LUN 15 TUTO CUIDO MI MENTE CUIDANDO MI CUERPO  YESSENIA 933623393 NUEV...IV SES LUN 15 TUTO CUIDO MI MENTE CUIDANDO MI CUERPO  YESSENIA 933623393 NUEV...
IV SES LUN 15 TUTO CUIDO MI MENTE CUIDANDO MI CUERPO YESSENIA 933623393 NUEV...
 
TL/CNL – 2.ª FASE .
TL/CNL – 2.ª FASE                       .TL/CNL – 2.ª FASE                       .
TL/CNL – 2.ª FASE .
 
TUTORIA II - CIRCULO DORADO UNIVERSIDAD CESAR VALLEJO
TUTORIA II - CIRCULO DORADO UNIVERSIDAD CESAR VALLEJOTUTORIA II - CIRCULO DORADO UNIVERSIDAD CESAR VALLEJO
TUTORIA II - CIRCULO DORADO UNIVERSIDAD CESAR VALLEJO
 
Actividad transversal 2-bloque 2. Actualización 2024
Actividad transversal 2-bloque 2. Actualización 2024Actividad transversal 2-bloque 2. Actualización 2024
Actividad transversal 2-bloque 2. Actualización 2024
 
4º SOY LECTOR PART2- MD EDUCATIVO.p df PARTE
4º SOY LECTOR PART2- MD  EDUCATIVO.p df PARTE4º SOY LECTOR PART2- MD  EDUCATIVO.p df PARTE
4º SOY LECTOR PART2- MD EDUCATIVO.p df PARTE
 
Mapa Mental de estrategias de articulación de las areas curriculares.pdf
Mapa Mental de estrategias de articulación de las areas curriculares.pdfMapa Mental de estrategias de articulación de las areas curriculares.pdf
Mapa Mental de estrategias de articulación de las areas curriculares.pdf
 
Manejo del Dengue, generalidades, actualización marzo 2024 minsa
Manejo del Dengue, generalidades, actualización marzo 2024 minsaManejo del Dengue, generalidades, actualización marzo 2024 minsa
Manejo del Dengue, generalidades, actualización marzo 2024 minsa
 
Earth Day Everyday 2024 54th anniversary
Earth Day Everyday 2024 54th anniversaryEarth Day Everyday 2024 54th anniversary
Earth Day Everyday 2024 54th anniversary
 
VISITA À PROTEÇÃO CIVIL _
VISITA À PROTEÇÃO CIVIL                  _VISITA À PROTEÇÃO CIVIL                  _
VISITA À PROTEÇÃO CIVIL _
 
Contextualización y aproximación al objeto de estudio de investigación cualit...
Contextualización y aproximación al objeto de estudio de investigación cualit...Contextualización y aproximación al objeto de estudio de investigación cualit...
Contextualización y aproximación al objeto de estudio de investigación cualit...
 
Presentación de Estrategias de Enseñanza-Aprendizaje Virtual.pptx
Presentación de Estrategias de Enseñanza-Aprendizaje Virtual.pptxPresentación de Estrategias de Enseñanza-Aprendizaje Virtual.pptx
Presentación de Estrategias de Enseñanza-Aprendizaje Virtual.pptx
 
periodico mural y sus partes y caracteristicas
periodico mural y sus partes y caracteristicasperiodico mural y sus partes y caracteristicas
periodico mural y sus partes y caracteristicas
 
05 Fenomenos fisicos y quimicos de la materia.pdf
05 Fenomenos fisicos y quimicos de la materia.pdf05 Fenomenos fisicos y quimicos de la materia.pdf
05 Fenomenos fisicos y quimicos de la materia.pdf
 
Tema 8.- Gestion de la imagen a traves de la comunicacion de crisis.pdf
Tema 8.- Gestion de la imagen a traves de la comunicacion de crisis.pdfTema 8.- Gestion de la imagen a traves de la comunicacion de crisis.pdf
Tema 8.- Gestion de la imagen a traves de la comunicacion de crisis.pdf
 
MODELO DE INFORME DE INDAGACION CIENTIFICA .docx
MODELO DE INFORME DE INDAGACION CIENTIFICA .docxMODELO DE INFORME DE INDAGACION CIENTIFICA .docx
MODELO DE INFORME DE INDAGACION CIENTIFICA .docx
 
Fichas de Matemática TERCERO DE SECUNDARIA.pdf
Fichas de Matemática TERCERO DE SECUNDARIA.pdfFichas de Matemática TERCERO DE SECUNDARIA.pdf
Fichas de Matemática TERCERO DE SECUNDARIA.pdf
 
Estas son las escuelas y colegios que tendrán modalidad no presencial este lu...
Estas son las escuelas y colegios que tendrán modalidad no presencial este lu...Estas son las escuelas y colegios que tendrán modalidad no presencial este lu...
Estas son las escuelas y colegios que tendrán modalidad no presencial este lu...
 
Estrategias de enseñanza - aprendizaje. Seminario de Tecnologia..pptx.pdf
Estrategias de enseñanza - aprendizaje. Seminario de Tecnologia..pptx.pdfEstrategias de enseñanza - aprendizaje. Seminario de Tecnologia..pptx.pdf
Estrategias de enseñanza - aprendizaje. Seminario de Tecnologia..pptx.pdf
 
Sesión La luz brilla en la oscuridad.pdf
Sesión  La luz brilla en la oscuridad.pdfSesión  La luz brilla en la oscuridad.pdf
Sesión La luz brilla en la oscuridad.pdf
 

Teoría de la evaluación de programas

  • 1. 4 LA TEORÍA DE LA EVALUACIÓN DE PROGRAMAS Catalina Martínez Mediano Departamento de Métodos de Investigación y Diagnóstico en Educación. LJNED E n este trabajo sobre La teoría de la evaluación de programas comenzamos realizando una revisión de la situación actual de la evaluación como disciplina de conocimiento, mencionando sus elementos constitutivos, para centrarnos, a continuación, en la evolución que ha seguido la disciplina de la Evaluación de programas, volcada en un primer momento en los métodos de investigación contribuyendo a su desarrollo adaptado a la problemática evaluativa y, posteriormente, en el desarrollo de la teoría de la evaluación de programas, fundamental en toda disciplina científica, que orienta la elaboración de los programas sociales y educativos, clarifica los procesos y las metas de la evaluación, comprueba su realización práctica y resultados, asesora en la Mejora de los programas y contribuye, en definitiva, a la construcción del conocimiento. 1. LA EVALUACIÓN COMO DISCIPLINA DE CONOCIMIENTO •^na disciplina es un constructo intelectual organizado. La esencia de una isciplina es su trabajo y la clave para su existencia es su concepto general y su metateoría. Podemos distinguir cuatro elementos en la emergencia y esarrollo de una nueva disciplina (Scriven, 1991:25). Los cuatro elementos ^on independientes.
  • 2. 74 EDUCACIÓN X X I - El primer elemento es la consciencia y reconocimiento explícito de que algo nuevo está emergiendo y existe una definición de ese algo nuevo. Lograr su definición o esbozar sus límites conlleva varios intentos par- cialmente prescriptivos, siendo éste un elemento crucial porque en él descansan las normas o las pautas de desarrollo para que esa nueva dis- ciplina crezca. Es el primer paso hacia la metateoría: la conciencia de un nuevo campo y su definición, dibujando su forma y sus límites, y ello se da en esta nueva disciplina. - El segundo elemento consiste en identificar y desarrollar una metodo- logía apropiada, entendida como un grupo de procedimientos e instru- mentos para generar resultados útiles en el nuevo campo. La metodo- logía puede ser altamente específica, pero puede abarcar un amplio rango o niveles de métodos generales y modelos de análisis; así ocurre en esta nueva disciplina. - El tercer elemento requiere un desarrollo del campo consistente en una base de datos, de producción de investigaciones, de informes, de des- cripciones, de ilustraciones y de principios y teorías generales. Los ele- mentos de su generalidad deben presentarse explícita o implícitamente al menos en forma de nuevos esquemas conceptuales, con la terminolo- gía específica asociada. Ello está representado por los múltiples mode- los evaluativos existentes, cada vez con un mayor grado de elaboración en sus concepciones teóricas y procedimentales. - El cuarto elemento está relacionado con el desarrollo de una metateoría de la disciplina que proporcione un método de trabajo para la práctica. La metateoría es casi siempre descriptiva y prescriptiva, derivando la última de las aportaciones de la primera. Sin una metateoría no puede identificarse la nueva área de estudio como una nueva disciplina al no tener identificado y definido su territorio, no poder explicitar sus pro- cedimientos, su metodología y sus límites. Y es lo que pretende lograr la reflexión sobre la existencia de la disciplina y sobre los elementos c o m u n e s y diferenciales que se pueden extraer de la diversidad de modelos evaluativos. Los límites de la evaluación como disciplina son definidos por la mayoría de los teóricos de la evaluación en términos que la consideran un área de eva- luación aplicada, como es la evaluación de programas. Scriven defiende que la disciplina debe considerarse desde una concepción amplia que recibiría el nombre de Evaluación, y que estaría integrada por las disciplinas de Evalua- ción de programas, de productos, de personal, de rendimiento, de proyectos y de políticas, que serían las grandes seis subáreas de la Evaluación. La Evaluación de programas utiliza métodos y técnicas de investigación que proceden de las Ciencias Sociales y de otras disciplinas como el Derecho,
  • 3. LA^TEORIA DE LA EVALUACIÓN DE PROGRAMAS 75 laLóg ica, la Etica, así como del propio desarrollo de la teoría para la evalua- ción de programas. La Evaluación es u n a nueva disciplina pero u n a antigua práctica. La defensa de la Evaluación c o m o disciplina descansa en sus características científicas en contraste con las evaluaciones subjetivas o no sistemáticas. La evaluación es considerada como ciencia por estar comprometida con la pro- ducción de conocimiento, y no sólo conocimiento práctico; la evaluación, desde el punto de vista de la práctica, se interesa por conocer el mérito rela- tivo de diferentes métodos de enseñanza, o de diferentes teorías de aprendi- zaje, o por los cambios en la salud como consecuencia de nuevas concepcio- nes en la práctica sanitaria. Pero también la evaluación es esencial para distinguir la ciencia de la pseudociencia al evaluar la calidad de la evidencia científica, la calidad de los diseños de investigación, de los instrumentos de Tiedida, de sus conclusiones, la calidad de los procedimientos en ingeniería, en las matemáticas, en los procesos judiciales. En el sentido de proceso inte- lectual, la evaluación forma parte de todas las disciplinas, tecnologías, nianualidades y de pensamiento racional en general (Scriven, 1991:4). La evaluación, asimismo, es considerada una transdisciplina, definiendo este término, creado por Scriven, como una disciplina instrumental que sirve a otras disciplinas - c o m o es el caso de la estadística o la lógica. El proceso de la evaluación no es simple, siendo su complejidad el princi- pal motivo de que en más de dos milenios haya eludido un análisis satisfac- torio sobre su naturaleza y sus límites disciplinarios. Y es desde finales de la década de los 60 cuando se viene realizando un gran esfuerzo por analizar la naturaleza de la evaluación. Scriven hace el siguiente análisis sobre la naturaleza de la evaluación: ^ evaluación no es sólo una mera acumulación y síntesis de datos relevantes Pdra la toma de decisiones. Digamos que éste es uno de los componentes de la ^"^aluación y uno de sus propósitos. ^l otro componente, y previo al anterior, es el de las premisas o criterios evalua- ítvos que verifican los valores relevantes y las normas elegidas para la realiza- ción de la evaluación. La evaluación como disciplina académica interesada en temas relativos a 'a evaluación de programas, de personas, de productos, etc., no ha empezado ^ ser considerada como tal sino en el último tercio del siglo XX. La discusión nietodológica acaecida en los últimos años, desde diversos campos, ha sido fructífera para abrir a la evaluación su propio campo. Pero el primer paso para que la evaluación se constituya en una disciplina científica va más allá de la simple práctica evaluativa elaborando guías que orienten dicha prácti-
  • 4. 76 EDUCACIÓN X X I ca. Comienza identificando normas que gobiernen, prescriban, las evaluacio- nes, encontrándose suficientemente desarrollado en la actualidad, en el sub- campo de la Evaluación de programas, mediante guías para realizar evalua- ciones c o m o las de Brinkerhoff et al., 1983; el Joint Committee, 1981; Mertens, 1989; Patton, 1980, 1990; Rossi y Freeman 1989; Smith, 1989; Wort- hen y Sanders, 1987; Worthen y White 1987, y muchas más. Para lograr el desarrollo de la disciplina debemos considerar el concepto de Evaluación en toda su amplitud, incluyendo todos los ámbitos a los que se aplica, tales como la Evaluación de programas, productos, personas, control de calidad, políticas, etc. Además, debemos ir más allá de la discusión meto- dológica para entrar en temas sobre los límites y contenidos de la Evalua- ción, las diferencias y relaciones de la Evaluación según se desarrolle en ámbitos científicos, humanísticos, jurídicos, artísticos, etc. Explicaciones sobre la adecuación de una u otra metodología según el ámbito y propósito de la evaluación (metametodología), el desarrollo de los procesos lógicos de las evaluaciones, así como el desarrollo de las teorías evaluativas y la metate- oría de la Evaluación. La metateoría es la teoría sobre la naturaleza de un campo de investiga- ción. Está interesada por la definición del campo que estudia, por sus lími- tes, por las diferencias entre el campo y los campos colaterales, por las razo- nes por las que ciertos métodos trabajan bien en la disciplina y las razones por las que otros son inadecuados. Debe ser capaz de desarrollar argumentos en favor de la Evaluación como disciplina, así como sugerir y justificar líneas para la investigación y su desarrollo. Hasta hace poco, la elaboración de los distintos modelos sobre la evalua- ción de programas es lo que formaba parte de la metateoría de la evaluación al constituir un nivel que orienta las realizaciones prácticas y discusiones metodológicas. La metateoría se va elaborando desde todos los niveles e inci- diendo en ellos; por ejemplo, en el desarrollo de los instrumentos de medida, en el de los métodos, las técnicas y las teorías y su discusión; desde todos los ámbitos donde se utiliza la evaluación nos preguntamos, explicamos y justi- ficamos el uso de una técnica, de un instrumento, de un método, de una teo- ría, de un plan o proyecto en su totalidad y del paradigma que lo fundamen- ta. C o n t i n u a m e n t e e s t a m o s r e c u r r i e n d o a la metateoría y estamos contribuyendo al desarrollo de la misma. La metateoría puede estar implíci- ta en la misma práctica y enseñar mediante el ejemplo de esa práctica. Y, aunque los modelos de Evaluación de programas han contribuido al desarro- llo de la disciplina de la Evaluación, hay que seguir trabajando para lograr esa aportación fundamental que dote a la evaluación de una teoría general, una metodología general, unas guías generales que orienten la práctica y u n a metateoría general para llegar a la esencia de la disciplina. La Evaluación es el nombre de una disciplina a u t ó n o m a con su propia clasificación en la Biblioteca del Congreso de los Estados Unidos (Scriven,
  • 5. LAJTEORÍA DE LA EVALUACIÓN DE PROGRAMAS 77 1991:141). Esta disciplina se refiere al estudio y aplicación de procedimien- tos para hacer evaluaciones objetivas y sistemáticas. Dentro de esta discipli- na autónoma, hay áreas semiautónomas como son las disciplinas de evalua- ción de programas, de productos, de personal, de rendimiento, de proyectos y de políticas. Otros campos aplicados autónomos incluidos son la valora- ción tecnológica, la evaluación médica y psicológica, el control de calidad. Otras aplicaciones se hacen en disciplinas tales como el curriculum, la críti- ca literaria, etc. Scriven hace dos manifestaciones diferentes en t o r n o a la Evaluación como disciplina: 1. Hay una sola disciplina de evaluación, que es una transdisciplina, con- sistente en un amplio rango de aplicaciones prácticas de la evaluación en varios campos. Uno de ellos, el más desarrollado, integrado por su propio concepto, teoría y metateoría es la evaluación de programas. Una naciente disciplina central dedicada al desarrollo de una lógica válida y distintiva, métodos y teorías generales para la evaluación. 2. Los distintos campos de la Evaluación como son la Evaluación de pro- gramas, productos, políticas, control de calidad, personal, etc., y que han desarrollado gran cantidad de modelos propios, pueden ser mejo- rados por el reconocimiento de sus conexiones con la disciplina central de la Evaluación. DEL DESARROLLO METODOLÓGICO A LA TEORÍA DE LA EVALUACIÓN DE PROGRAMAS La teoría proporciona un marco de referencia para ayudar a las personas ^ comprender su m u n d o y a actuar en él. La teoría es crucial para la investi- gación; no sólo proporciona orientaciones para analizar un fenómeno, sino ^ue proporciona un esquema para comprender el significado de los resulta- rlos de la investigación. Sin embargo, hasta hace poco tiempo, la literatura evaluativa apenas piencionaba la importancia de la teoría de la evaluación de programas ni la ficorporación de dicha teoría en los procesos de evaluación. La tendencia ha consistido en que las evaluaciones estén orientadas por los métodos, y, aun- ^"Jc esto ha supuesto importantes contribuciones para el desarrollo de la Valuación de programas, de otro lado, ha ocasionado que se descuidara el esarrollo del marco conceptual que guiara la práctica evaluativa. Shadish y *^eichardt (1987) justifican tal hecho argumentando que la acción y la prácti- f preceden al desarrollo de la teoría en cualquier disciplina, y a la evalua- ción de programas le ha ocurrido lo mismo.
  • 6. 78 EDUCACIÓN X X I Esto puede explicarse, parcialmente, p o r la preocupación por realizar mejores investigaciones evaluativas que tuvieran en cuenta todos los ele- mentos que inciden en la consecución de lo pretendido por un programa, lo que llevó a la necesidad de preocuparse por ampliar los enfoques y meto- dologías de investigación aplicados a la evaluación de programas. De m o d o que, en los primeros m o m e n t o s del desarrollo de la Evaluación de progra- m a s , los m é t o d o s d e investigación científica h a n j u g a d o un papel m u y importante en muchos de los trabajos de evaluación realizados en un inten- to por definir y conceptualizar la evaluación de programas. Así, S u c h m a n (1967) vio la evaluación como la utilización de los métodos y técnicas de investigación científica utilizados con el propósito de evaluar. La evalua- ción de programas no se veía como u n a disciplina de conocimiento, sino como u n a modalidad de investigación aplicada dentro de la Educación y de las Ciencias Sociales. Y la utilización de los métodos científicos más presti- giosos, en su m o m e n t o , era crucial p a r a poder reclamar el estatus científi- co de esta nueva disciplina. Así, Tyler, que concebía la evaluación como la determinación del grado en que los objetivos de un programa eran realmente conseguidos, establecía las metas generales y los objetivos conductuales y comparaba los resultados con las metas, utilizando la metodología de los diseños experimentales y cuasiex- perimentales, p r u e b a s e s t a n d a r i z a d a s de medida y el informe clásico de investigación sobre la conveniencia de mantener o modificar los programas. Stufflebeam considera la evaluación como el proceso de identificar, obte- ner y proporcionar información útil y descriptiva del valor y mérito de las metas, la planificación, la realización y el impacto de un programa, con el fin de servir de guía para la toma de decisiones, solucionar los problemas de res- ponsabilidad y comprender los fenómenos implicados. Utiliza una metodolo- gía diversa en función de cada tipo de evaluación contexto, entrada, proceso o producto, y sus informes son frecuentes para proporcionar u n a guía para la toma de decisiones de mejora del programa, y la generalización posible es la que permita el muestreo y las metodologías utilizadas. Para Scriven la evaluación, como ciencia de la valoración, consiste en determinar el mérito y valor del objeto evaluado. Para él la evaluación es la recogida y síntesis de información basada en criterios evaluativos que verifi- quen los valores relevantes y las normas elegidas para la realización, con la finalidad de ser utilizada en la toma de decisiones. Sirve a las funciones for- mativa, proporcionando información para mejorar un programa durante su realización, y sumativa, proporcionando información para implantar, modi- ficar o retirar un programa. Utiliza u n a metodología neopositivista, relativis- ta y de la lógica probativa, utilizando un tipo de informe descriptivo. La generalización de los resultados es la que permite la validez externa dificul- tada por la relatividad de los criterios de valor.
  • 7. L A j n ; O R Í A DE LA EVALUACIÓN DE PROGRAMAS 79 Stake considera que la evaluación sirve para descubrir el mérito y las deficiencias de un programa. En su "modelo de evaluación respondiente", el evaluador debe asegurarse de prestar atención a aquello por lo que le piden que haga la evaluación, pero también debe prestar atención a lo que está ocu- rriendo en el programa y elegir las cuestiones y criterios de valor. Utiliza metodologías cualitativas, fundamentalmente el estudio de caso. La generali- zación es la propia de las investigaciones naturalista, apoyándose en la expe- riencia vicaria. Es útil si descubre el mérito y las deficiencias de un programa para ayudar a sus participantes a incrementar su comprensión y responder a sus necesidades. Para Guba y Lincoln, la evaluación, en un contexto o situación particular, es un proceso de recogida de datos, en continua e inseparable valoración e interpretación basada en el consenso, en donde los hechos y valores van uni- dos. El evaluador utiliza metodologías naturalistas, trabaja en equipo, con todo el grupo implicado en la evaluación. Establecen círculos hermenéuticos para lograr construcciones e identificar cuestiones. El informe es descripti- vo, facilitando la experiencia vicaria para la generalización de los hallazgos. Cronbach define la evaluación como la recogida y uso de la información para tomar decisiones sobre un programa educativo; es una actividad diver- sificada y plural, y ni un solo grupo de principios puede ser suficiente para todas las situaciones. Ve la evaluación integrada en la investigación política. Defiende el uso de metodologías cuantitativas y cualitativas. Sus informes son narrativos para facilitar la experiencia vicaria. Considera que la generali- zación, el generar conocimiento extrapolable desde las personas, situaciones, tratamientos y observaciones a otros, es lo más importante de la investiga- ción evaluativa. Su finalidad debe servir para la mejora de los programas y para la formación de la comunidad política. Pérez Juste define la evaluación como un proceso sistemático de recogida de información rigurosa, valiosa, válida y fiable, orientado a valorar la cali- dad y los logros de un programa para la toma de decisiones de mejora del programa, del personal implicado y del cuerpo social en el que se encuentra 'nrnerso. Utiliza metodologías cuantitativas y cualitativas. Su informe es des- criptivo, basado en los datos y en los juicios. La generalización, aquella que permite el diseño, y su utilidad para la mejora del personal, del programa y de la comunidad. Como podemos ver, el "enfoque de evaluación orientada por el método" se VIO claramente apoyada por el hecho de que la mayoría de las perspectivas de evaluación han estado orientadas principalmente por el método. Por ejem- P'o, para Campbell y Stanley (1963) y Cook (y Campbell, 1969), defensores del paradigma experimental, una evaluación estaba mejor realizada si seguía ^ rigurosidad de los diseños experimentales. Por otro lado, los defensores ^' enfoque naturalista a r g u m e n t a n que los métodos cualitativos servían
  • 8. 80 EDUCACIÓN XXI mejor a la evaluación. E incluso investigadores naturalistas como Parlett y Hamilton (1978) y Guba y Lincoln (1981) negaban cualquier mérito de los métodos experimentales o cuasi-experimentales aplicados a la evaluación. Cronbach, en 1982, argumentaba que el uso de los métodos rigurosos lleva a que una evaluación sea rígida y estrecha en su alcance. Estaba interesado en incorporar la evaluación de programas a los procesos en los contextos y en las organizaciones para facilitar una toma de decisiones plural. Las evaluaciones orientadas por los métodos han cobrado aún más fuerza por ese largo debate entre los métodos de investigación cuantitativos y cuali- tativos más adaptables a la evaluación. Estas diferentes perspectivas de la evaluación han supuesto una contribución muy importante al desarrollo de la Evaluación de programas, lográndose un gran consenso entre los evalua- dores en torno a la idea de que una evaluación debe comprometerse con múl- tiples valores y temas. Como consecuencia, la perspectiva tradicional, experi- mentalista, ha constatado sus limitaciones en su alcance y ha evidenciado sus dificultades en las situaciones en las cuales actúa la evaluación y que requiere fijarse en múltiples aspectos. Sobre esto, Cook y Reichardt (1986) advierten que el uso de múltiples metodologías conlleva mayor tiempo y costo, y, por supuesto, una preparación adecuada. Cada uno de los enfoques metodológicos tiene sus propias concepciones, su lógica y sus procedimien- tos. Sin un esfuerzo hacia una fundamentación de por qué es positiva la com- plementariedad metodológica, la defensa del uso de múltiples metodologías en la evaluación puede no ser apoyada. Sin embargo, los modelos de evalua- ción de programas que defienden la complementariedad metodológica como los de Cronbach, Pérez Juste, Rossi y Freeman o Stuflebeam, aportan crite- rios suficientes que muestran la conveniencia de esta complementariedad metodológica dentro de sus propios modelos. El propio Cook (1985) ha adoptado una perspectiva postexperimental, de "multiplicidad crítica", ya que defiende que la perspectiva del paradigma experimental debe transformarse en otra más comprehensiva que se adapte mejor a los aspectos políticos y organizativos de la evaluación de programas. Cook, junto a sus colaboradores Shadish y otros, afirma que los evaluadores deberían planificar sus evaluaciones previendo el uso de múltiples metodolo- gías, investigar múltiples aspectos de los programas y considerar el punto de vista de múltiples participantes. Defiende las ventajas de esta nueva perspec- tiva sobre el paradigma experimental y considera que reduce las posibilida- des de interpretación errónea, a la vez que proporciona una información más comprehensiva, global e integradora para los procesos políticos, además de favorecer una evaluación más racional y consciente de sus valores. E n los primeros tiempos de su desarrollo, la Evaluación de programas tuvo dificul- tades que no podían resolverse metodológicamente, debido a que u n a eva- luación no puede realizarse sin limitaciones de tiempo y de recursos, y no puede abarcar todas las opciones, y ello supone llegar a acuerdos que requie- ren no sólo de unas metodologías, sino de más de un grupo de principios y de
  • 9. LA TEORÍA DE LA EVALUACIÓN DE PROGRAMAS 81 teorías que guíen el proceso de evaluación de programas. Shadish y Cois. (1986) dicen que el reto más importante que tiene planteada esa multiplici- dad crítica es el desarrollo de la teoría evaluativa. El uso de una metodología u otra para la evaluación de un programa dependerá de los propósitos de la evaluación, del estado de madurez del pro- grama, de los recursos disponibles, de los intereses y necesidades de los patrocinadores y de los evaluadores y del medio político y organizativo del programa. De modo que, cuando un programa está desarrollándose, el estu- diar su eficacia mediante un diseño experimental carece de sentido puesto Que pasaría de puntillas sobre los procesos y los contextos; y utilizar los niétodos cualitativos, en exclusividad, puede no ser lo más adecuado para valorar la eficacia de un programa de amplio alcance, elaborado para apli- carlo a toda la población de un país. Tantas discusiones sobre los métodos puede llevar a pensar que la solu- ción a estos problemas se resolvería tras conseguir una mayor sofisticación sn los métodos de investigación. El desarrollo de los métodos de investiga- ción para la evaluación de programas ha sido fundamental, pero se necesita una conceptualización y un esfuerzo teórico para sistematizar e integrar los tactores conceptuales y los métodos de investigación para que avance la eva- luación de programas y se consolide, aún más, como disciplina. (Chen, 1990:17). La teoría de programas debe proporcionar orientaciones para iden- tificar qué temas son los más importantes en una evaluación, qué método o tnétodos son los más relevantes, y sugerir cómo aplicar el método para alcan- zar los objetivos propuestos en la evaluación. Chen y Rossi argumentan que las evaluaciones orientadas por el método tienden a maximizar un tipo de validez en perjuicio de otras. Advierten de estos problemas y señalan la importancia de la teoría de programas para Jograr varios tipos de validez. Y tratan de resolverlo con su enfoque de Eva- ^f^aciones conducidas por la teoría (1981, 1983, 1987, 1989, 1992). Para Rossi y Ereeman (1993), creadores del enfoque de Evaluación comprehensiva, 'adaptada y conducida por la teoría, toda evaluación debe centrarse en tres tipos de actividades: 1) análisis relacionados con la conceptualización y dise- co de las intervenciones, 2) asesoramiento para la realización del programa, ^) valoración de la utilidad del programa, sus efectos y la relación entre cos- os-eficacia. Debe recoger información conceptual, de las necesidades de los programas sociales para planificar, redefinir, realizar y evaluar, procesual y e irnpacto, utilizando metodologías cuantitativas y cualitativas. El informe ^orienta a la utilidad, a dar respuesta a las necesidades sociales. Y la gene- ^hzación es aquella que permitan los diseños. Entre alguna de las ventajas de la realización de evaluaciones guiadas por ^teoría de programas está la de que la teoría permite comprobar si los resul- Qos del programa se deben a cómo se ejecuta el programa o se debe a la
  • 10. 82 EDUCACIÓN X X I conceptualización propia del mismo. La teoría de programas ayuda a clarifi- car si un programa está siendo desarrollado siguiendo los criterios explicita- dos en el mismo y en las condiciones adecuadas. La teoría de programas puede usarse para especificar los efectos intermedios de un programa que podría llegar a evidenciar los aspectos positivos y negativos del mismo antes de que los resultados finales puedan manifestarse, lo que proporcionaría posibilidades de mejora del programa antes de que se haya concluido el pro- grama. La incorporación de la teoría de programas en una evaluación fortalece la información de los evaluadores para clarificar las metas del programa, para observar los procesos y para atender las necesidades de los patrocinadores y de los participantes y beneficiarios, y para orientarles en la realización de las diferentes decisiones alternativas de mejora. Como disciplina, la evaluación de programas debe desarrollar su propia teoría, y los métodos, en vez de ser tratados como un fin en sí mismos, deben ser considerados como medios para favorecer el desarrollo del conocimiento. Como dice Bickman (1987) la evaluación es, a menudo, considerada como una ciencia práctica, pero es ambas cosas, una práctica y una ciencia que requiere de su propia teoría. Actualmente, cuando el debate metodológico ha contribuido al desarrollo de los métodos, se necesita un marco comprehensivo, general, teórico, que vincule e integre las actividades de la evaluación a un nivel más general que el que consiguen los distintos modelos de evaluación de programas. Porque, a medida que se han desarrollado los modelos de evaluación de programas, se ha ido t o m a n d o conciencia de que las intervenciones de los programas sociales o educativos no trabajan, normalmente, de un modo predecible, y que los problemas a resolver no son sencillos. Los que toman decisiones tam- bién advierten que prefieren solucionar o reducir los problemas más que ini- ciar cambios globales precipitados. Por ello, las evaluaciones que se centran sólo en los resultados de los programas no son útiles, puesto que no infor- man para tomar decisiones al no indicar en qué dirección, en qué aspectos y de qué manera se debe incidir para conseguir mejores resultados. LA NATURALEZA DE LA TEORÍA DE LA EVALUACIÓN DE PROGRAMAS Un programa de intervención educativa o un programa de intervención social supone un esfuerzo intencionado y organizado para intervenir en un proceso social con el propósito de resolver un problema y proporcionar un servicio. La estructuración de los esfuerzos organizados adecuadamente y dirigidos a la consecución de las metas deseadas supone que el programa opera bajo una teoría, aunque, a veces, esta teoría sea implícita. La teoría está siempre implícita, o explícita, en la mente de los investigadores; y de los
  • 11. L A TEORÍA DE LA EVALUACIÓN DE PROGRAMAS 83 evaluadores. La teoría explícita proporciona una guía general para la elabo- ración del programa y explica cómo el programa organiza su funcionamien- to, aunque puede verse influida por los prejuicios. La teoría, en la evaluación de programas, debe estar explícita. La evaluación de programas es algo más que una metodología aplicada; la evaluación es diversa en muchos modos y su potencialidad para la unidad intelectual, que es lo que Scriven llama la lógica de la evaluación, podría crear puentes entre la diversidad de evaluadores con el fin de desarrollar la teoría de la evaluación de programas. Los intentos por mejorar la teoría de la evaluación de programas son anti- guos. Weiss (1972) sugería que la utilización de los resultados de una evalua- ción podría verse reforzada si se incluyeran estos elementos básicos: 1. Un análisis de las premisas teóricas del programa. 2. Una especificación de los procesos del programa para informar acerca de los vínculos entre los objetivos y las metas del programa. 3. Un análisis de las realizaciones del programa y de sus resultados. 4. Un informe detallado de cuáles son las alternativas más efectivas que pueden ayudar a mejorar el programa, y cómo realizarlas. Otra de las razones del movimiento para el desarrollo de la teoría de la avaluación de programas se relaciona con la necesidad de comprender cómo se realizan los tratamientos. Los estudios centrados en la realización de los programas y en la intervención de los mismos proporcionan evidencias de que la realización es algo muy complicado dentro del ámbito humano. Las dificultades que se han revelado en la puesta en marcha y desarrollo de los programas han señalado la necesidad de que los patrocinadores, los promo- tores de un programa, presten atención a estos aspectos para mejorar la •mplementación del programa. Es importante, por ello, que, dentro del desa- rrollo del m a r c o teórico, se integre el desarrollo de los p r o g r a m a s en la acción, como parte importante de la actividad evaluativa. Se trataría con ello de evitar lo que a veces ocurre cuando se evalúan los programas, que quienes realizan dichas evaluaciones tienden a proceder más según sus puntos de V'sta y su preparación metodológica que en función de las necesidades reales de ese programa, y esto no siempre es consistente con los objetivos de quie- nes elaboran o diseñan un p r o g r a m a a d a p t a d o a u n a s necesidades p a r a resolverlas. Por otra parte, las dificultades implícitas en la puesta en práctica de los programas proporciona a los evaluadores grandes dificultades para desarro- "ar sus estrategias y sus marcos conceptuales de modo que les permitieran
  • 12. 84 EDUCACIÓN XXi hacer frente a estos problemas, y ciertamente en las Ciencias Sociales, y en Educación, no pueden utilizarse los métodos de una manera estricta como, por otra parte, se pueden utilizar en las Ciencias Físicas. En Educación, y en Ciencias Sociales, los métodos de investigación no se pueden aplicar si no es atendiendo a los propósitos, las circunstancias y contextos en los que se desa- rrollan los programas. Desde el punto de vista conceptual los evaluadores no sólo deben infor- m a r de la realización de sus evaluaciones, sino que deben trabajar con los patrocinadores del programa para conocer y mejorar los modos de imple- mentación de la realización de los programas, y, posteriormente, deben cola- borar para mejorar el programa y su realización. Deben informar sobre los cambios que se requiere hacer en el programa, qué criterios los fundamen- tan, qué estrategias se deben planificar para lograrlos, quiénes deben realizar los cambios y qué consecuencias, previsibles, y no previsibles, producirán las modificaciones para la mejora (De la Orden, 1996). Chen, para argumentar su Teoría de evaluación de programas, toma una idea de Weber. El desarrollo de la evaluación de programas y su emergencia c o m o disciplina se ha visto beneficiada por el desarrollo de la sociedad m o d e r n a , racionalista y contable. Sin e m b a r g o , Weber advertía que es importante ver la diferencia entre dos tipos de racionalidad: la racionalidad formal y la racionalidad sustantiva, o los valores. La racionalidad formal tiene que ver con la eficiencia y la eficacia en la consecución de una meta específica en un tiempo dado, mientras que la racionalidad de valor o sus- tantiva se refiere a los propósitos sustantivos y fines a largo plazo de los indi- viduos, de los grupos y de las sociedades. Cuando la racionalidad formal se dirige a una explicación parcial, estre- cha, de las actividades sociales, los propósitos generales y las metas a largo plazo se pierden de vista. El argumento de Weber es relevante para la con- ceptualización de la evaluación de programas. Cuando su conceptualización es estrecha y simplemente mide las metas conseguidas, el énfasis se pone en la racionalidad formal, los evaluadores se interesan por la eficiencia y por la eficacia del tratamiento, descuidando algo tan esencial c o m o la cuestión sobre la adecuación de las metas a las necesidades y las consecuencias inten- cionadas y no intencionadas a medio y largo plazo. Para evitar tales proble- mas se necesita ampliar el marco conceptual de la evaluación de programas, implicada más en la racionalidad sustantiva o de valor, que proporcione una información más rica y real a los propósitos de los programas y a sus impli- caciones en intereses sociales m á s amplios. Shadish, Cook y Levitón (1991: 31) defienden la necesidad de fundamen- tar las teorías evaluativas en cinco componentes teóricos básicos. Son los siguientes:
  • 13. LAJEORIA DE LA EVALUACIÓN DE PROGRAMAS 85 • Programación social. El componente relativo a la programación social tiene que ver con la naturaleza de los programas sociales y sus funcio- nes en la solución de los problemas sociales. Se relaciona con la estruc- tura interna y con el funcionamiento de los programas, con sus relacio- nes con las instituciones políticas y sus actividades y con los procesos a través de los cuales los programas y sus componentes pueden cambiar- se para mejorar el rendimiento de programa. • La construcción del conocimiento. Este componente se interesa por la comprensión de evidencia aceptable y los métodos para producir tal evidencia sobre el objeto que va a ser evaluado. • Los valores. El componente del valor está relacionado con el papel que los valores y los procesos de valoración juegan en la evaluación. Está relacionado con la elección de los valores que deben estar representa- dos en una evaluación y con la construcción de juicios de valor sobre los programas sociales. • La utilidad del conocimiento. El componente del uso, o utilidad, tiene que ver con el modo en que el conocimiento de las Ciencias Sociales y de la Educación puede ser utilizada en la política social y en los progra- mas. Está relacionado con los posibles modos de incrementar la utili- dad de los resultados de las evaluaciones. • La práctica evaluativa. El componente relacionado con la práctica eva- luativa tiene que ver con las actividades que el evaluador hace en su pro- fesión. Estudia el papel de los evaluadores en relación con los que reali- zan el programa, c ó m o decidir las cuestiones o preguntas claves, de dónde conseguir u obtener la información para elaborar y responder a tales cuestiones, y qué métodos se deben utilizar para priorizar las cues- tiones más relevantes y los temas sobre los cuales las dudas o las incerti- dumbres son mayores, así como conocer las posibilidades y limitaciones de tiempo, los recursos financieros, las destrezas del personal y las nor- mas para proceder a la realización de la evaluación (Cook y Shadish, 1986, Shadish y Reichardt, 1987 en Shadish, Cook y Levitón, 1991:36). En u n a teoría de evaluación de programas, los criterios seleccionados para juzgar la realización de u n programa claramente implican juicios de j'alor. Temas claves relacionados con cómo diseñar un tratamiento o cómo levarlo a cabo, también implican juicios de valor Podemos decir que la teo- J"ia, los valores, las propias .preferencias, e incluso los prejuicios, deben nacerse explícitos. No cabe duda de que cualquier opción estará influida por a teoría - y por los prejuicios. No hay un único significado del término teoría universalmente aceptado, 'formalmente connota u n cuerpo de conocimientos que organiza, describe.
  • 14. 86 EDUCACIÓN XXi prescribe, predice, explica con el fin de ayudar a la comprensión y al control de los temas que estudia, aunque las teorías hacen esto de diferentes mane- ras. No obstante, el significado del término teoría más aceptado es el que la define como un grupo de concepciones interrelacionadas, principios o pro- posiciones para explicar o guiar acciones sociales. Las teorías son de dos tipos: descriptivas y prescriptivas. El propósito de las teorías llamadas descriptivas es describir y explicar un fenómeno, un hecho. La teoría prescriptiva se relaciona con lo que se debe hacer o cómo algo se puede hacer mejor. Las teorías descriptivas toman un grupo de condi- ciones y métodos, o procedimientos, como dados, constantes, y tratan de describir y explicar la probabilidad de los resultados, las metas, como varia- bles de interés. En contraste, las teorías prescriptivas, y los principios pres- criptivos se apoyan en unas condiciones y metas y prescriben los mejores métodos, o procedimientos, como variables de interés, para conseguirlas. (Reigeluth, 1983:20). Condiciones el Programa Métodos del Programa 1. Teorías descriptivas. 2. Teorías prescriptivas La teoría de la evaluación de programas integra las dos naturalezas de la teo- ría: la descriptiva y la prescriptiva. Las teorías prescriptivas incluyen las siguientes características: 1. Orientación a la acción, 2. diseño del tratamiento y su realización, y 3. un amplio rango de acciones para decidir sobre la elección de los crite- rios de valoración de los logros.
  • 15. LA TEORÍA DE LA EVALUACIÓN DE PROGRAMAS 87 La teoría de la evaluación de programas es definida por Chen (1990) como una especificación de lo que se debe hacer para conseguir las metas deseadas, qué otros impactos o logros importantes pueden ser también anticipados, y cómo estas metas y estos impactos pueden generarse. La primera parte de esta definición se relaciona con la teoría prescripti- va, también llamada normativa -¿qué se debe h a c e r ? - y la segunda parte se relaciona con la teoría descriptiva, también llamada causativa, en lo que subyace a los mecanismos causales que relacionan los tratamientos del pro- grama, los procesos de realización, los programas de tratamiento, los proce- sos de implementación y las metas. Chen prefiere utilizar la terminología de teoría normativa, en lugar de teoría prescriptiva, y teoría causativa, en vez de teoría descriptiva. Ambas subteorías forman parte de la teoría de la eva- luación de programas. El objetivo de las evaluaciones normativas es proporcionar información para mejorar la estructura de los programas, los tratamientos, el medio en el que se desarrollan y sus metas. Por otra parte, el principal objetivo de las eva- luaciones causativas es valorar las relaciones entre los t r a t a m i e n t o s , los medios en donde se realizan y los logros. La teoría normativa de la evaluación de programas debe proporcionar guías sobre qué metas, o qué logros, deben intentar conseguirse y deben ser examinados, y cómo debe diseñarse el tratamiento y planificarse su realiza- ción. La teoría causativa especifica cómo trabaja el programa mediante la identificación de las condiciones bajo las cuales ciertos procesos emergerán y cuáles serán las consecuencias (Chen, 1990: 43). La teoría normativa procede examinando las premisas, las concepciones, los procedimientos, o el conocimiento previo. Además, proporciona una jus- tificación para la estructura y actividades del programa, guía la planifica- ción, la formulación y la realización del programa. De otro lado, la teoría causativa para la evaluación de programas se basa en la experiencia; repre- senta el conocimiento empírico, busca las relaciones causales entre los trata- mientos y los resultados. Una teoría causativa especifica los mecanismos causales que vinculan, median o condicionan las relaciones de causa-efecto entre las variables de tratamiento (variables independientes) y los logros del programa (variables dependientes). Al interesarse y preocuparse por los problemas del día a día del programa, el evaluador se sensibiliza hacia las necesidades de la gente que aplica el pro- grama y potencia la utilización de los resultados evaluativos al no perder el objetivo h u m a n o de las necesidades de quienes trabajan en el programa. Además, los p a t r o c i n a d o r e s y p r o m o t o r e s de los p r o g r a m a s necesitan la información a tiempo para actuar y tomar decisiones eficaces.
  • 16. 88 EDUCACIÓN XXI La evaluación desde la teoría normativa requiere de la consistencia entre la estructura teórica del programa y la estructura de ñancionamiento del pro- grama para ser valorada. Esto puede realizarse en un estadio temprano del desarrollo del programa, que proporcionará información para diagnosticar pronto los problemas a tiempo y realizar acciones para tratar de que estos problemas se subsanen, fortaleciendo la estructura del programa y/o los pro- cesos de realización. Cuando el tratamiento de u n programa es construido y ejecutado adecua- damente, la credibilidad del programa se potencia. No obstante, esto no lleva implícito que el programa sea eficaz. La evaluación del programa, desde la teoría normativa, es insuficiente, por sí misma, para comprender si el pro- grama consigue las metas para las cuales ha sido diseñado o para conocer las consecuencias no intencionadas del programa. Para comprender la eficacia del programa, la teoría causativa es importante y necesaria. Una evaluación que se rige por la teoría causativa proporciona informa- ción sobre el impacto generado por el programa y sobre cómo dichos impac- tos fueron generados. El valor de un programa es muy difícil de juzgar sin tener información sobre factores de contexto o de intervención que ayuden a conocer por qué un programa tiene éxito o fracasa. La especificación de la teoría causativa en una evaluación es especialmen- te útil para la mejora futura del programa. Cuando la teoría causativa es pro- yectada en detalle, la evaluación puede conocer las debilidades de los meca- nismos causales que subyacen en el p r o g r a m a , identificar los factores contextúales e intervinientes que dificultan o facilitan los procesos del pro- grama y sus resultados, y sugerir posibles estrategias para ocuparse de mejo- rar sus programas e introducir los cambios necesarios para ello. Ambas teo- rías, normativa y causativa, son necesarias y constituyen las dos subteorías de la teoría de la evaluación de programas.
  • 17. LA TEORÍA DE LA EVALUACIÓN DE PROGRAMAS 89 BIBLIOGRAFÍA ALKIN, M.C. (1969)."Evaluation theory CRONBACH, L.J. (1982). Designing eva- development", £va/MaíioM Comtnent, luations of educational and social pro- 2, 1. grams. San Francisco: Jossey-Bass. BICKMAN, L. (Ed.) (1987). Using pro- CRONBACH, L.J., AMBRON, S.R., DORN- gramm theroy in evaluation. San BUSCH, S.M., HESS, R.D. HORNIK, Francisco: Jossey-Bass. R.C. PHILLIPS, D.C., WALKER, D.F. y CAMPBELL, D.T. y STANLEY, J.C (1963). WEINER, S.S.(1980). Toward reform Experimental and quasi-experimental of program evaluation. San Francisco, designs for research. Chicago, ILL.: CA: Josey-Bass. Rand-McNally (1 ed. 1963). (Traduci- CRONBACH, L.J. y SUPPES, R (Eds.) do al castellano: Diseños experimenta- (1969). Research for tomorrow's scho- les y cuasi-experimentales en la inves- ols: disciplined inquiry for education. tigación social. Buenos Aires: New York: Macmillan. Amorrortu. 1970. DE LA ORDEN, A. (1996). "Evaluación, CHELINSKY, E. y SHADISH, W.R. innovación y calidad educativa". XI (1997). Evaluation for the 21" Century. Congreso Nacional de Pedagogía: Thousand Oaks, CA.: Sage. Innovación pedagógica y políticas CHEN, H-T.(1990). Theory-driven evalua- educativas. San Sebastián: Sociedad tion. Newbury Park:Sage. Española de Pedagogía y Universidad CHEN, H-T. y ROSSI,P.H. (1981). The del País Vasco. multi-goal, theory-driven approach to FETTERMAN, D. M. (1992). "Theory in evaluation: a model linking basic and evaluation: we think, therefore we theorize (An etnographer's perspecti- applied social science. Social Forces, va)". En H-t Chen y P. H. Rossi: O.c. 59: 106-112. FULLAN, M. (1994). Change forces. Pro- CHEN, H-T y ROSSI,RH. (1983). Eva- bing the depths of Evaluational luating with sense: The Theory-driven Reform. Bristol: Palmer Press. approach. Evaluation Review,7, 106- GUBA, E.G. y LINCOLN, I.S. (1981). 122. Efjéctive evaluation. San Francisco, CHEN, H-T y ROSSI.RH. (1989). Issues Washington, London: Jossey Bass. in theory-driven perspective. Evalua- GUBA, E.G. y LINCOLN, I.S. (1989). tion and Program Planning, 12, 299- Fourth generation evaluation. Lon- 306. don: Sage. CHEN, H-T y ROSSLPH. (Eds.) (1992). HOUSE, E.R. (Edit.) (1986). New direc- Using theory to improve program and tionsin educational evaluation. Lon- policy evaluation. New York, London: don: Palmer Press. Grenwood Press. LINCOLN, Y.S. (1985). Organizational COOK, T.D. y CAMPBELL, D.T. (1969). theory and inquiry. London: Sage. Quasi-experimentation: Designs and LINCOLN, I.S. y GUBA, E.G. (1985). analysis issues for field settings. Chi- Naturalistic inquiry. Beverly Hills, cago, ILL.: Rand-McNally. CA: Sage. COOK, T.D. y REICHARDT, CH. S. LINCOLN, Y.S. y GUBA, E.G. (1986). "But (1986). Métodos cualitativos y cuanti- is it rigurous? Trustworthiness and tativos en investigación educativa. authenticity in naturalistic evalua- Madrid: Morata. tion", (73-78), En D.D.Williams (Ed.): CRONBACH, L.J. (1973). "Remarks to Naturalistic evaluation. New directions the new society". Evaluation Research for program evaluation, 30, San Fran- Society Newsletter, 1,1, (1-3). cisco: Jossey-Bass.
  • 18. 90 EDUCACIÓN X X I LIPSEY, M.W. y POLLARD.J.A. (1989). SHADISH, W.R. y REICHARDT, C.S. "Driving toward theory in program (1987). Evaluation Sludies Review evaluation: more models to choose Annual. Newbury Park, CA: Sage. from". Evaluation and Program Plan- SHADISH, W.R. COOK, TD. y LEVITÓN, ning. 12,317-328. L.C. (1991). Foundations of program MARTÍNEZ MEDIANO, C. (1993). Facto- evaluation: Theories of practice. New- res de eficacia de los Centros Asociados bury Park, CA: Sage. de la UNED. Madrid: ICI-AIESAD- STAKE, R.E. (1967). The counlenance of UNED. educational evaluation. Teachers Colle- MARTÍNEZ MEDIANO, C. (1996). "Inves- ge Record. 68, (523-540). tigación evaluativa sobre los factores STAKE, R.E. (1975). Programm evalua- de eficacia de los Centros Asociados de tion, particularly responsive evaluation. la UNED". Revista Iberoamericana de Occasional Paper Series, 5. Uni-versity Educación superior a Distancia. AIE- of Western Michigan. Evaluation Can- SAD, Vol. VIII, 1.25-50. ter. MARTÍNEZ MEDIANO, C. (1997). Eva- STAKE, R.E. (1980). "Program evaluation, luación de programas educativos. particularly responsive evaluation". En Investigación evaluativa. Modelos de W.B.Dickrell y D.Hamilton (Eds.), Re- evaluación de programas. Madrid: thinking educational research, (Jl-Kl), UNED, CU. 159. London: Hodder and Stoughton. PARLETT,M.R. y HAMILTON, D. (1978). STAKE, R.E. (1990). "Responsive evalua- Evaluation as illumnation: A new tion". En H.G. Walberg y G.D. Haertel approach to the study ofinnovative pro- (Eds.): The Inteniational Encyclopedia grammes. Occasional paper, 9, Centre of Educational Evaluation. Oxford, for Research in the Educational Scien- ces. University of Edinburgh. 1972. New York: Pergamon Press, (75-77). SUCHMAN, E.A (1967). Evaluation rese- PATTON, M.Q. (1980). Qualitative evalua- tion and research methods. Newbury arch: Principies and practice in public Park, CA: Sage. (ed rev.1990). service and social action programs. PÉREZ JUSTE, R. (1992). Evaluación de New York: Russell Sage Foundation. programas de orientación. V Semina- WEISS, C H . (1972). Evaluation research: rio Iberoamericano de Orientación. Methods for assessing program effective- Actas AEOEP y Departamento MIDE. mess. Englewood Cliffs,NJ: Prentice- (46-66). Hall. PÉREZ JUSTE, R., MARTÍNEZ MEDIA- WEISS, C H . (1972). "Evaluating educa- NO, C. y RODRÍGUEZ GÓMEZ, G. tional and social programms: A treefui (1994). Centros educativos de calidad. of owls". En CH.Weiss (Ed.): Evalua- Madrid: ITE.CECE. ting actions programs: Readings in REIGELUTH, CH. M. (1983). "Instruc- social action and education. (3-27). tional Design: What is it and why is Boston: Allyn and Bacon. it?" (3-36). En: C.M. Reigeluth (Ed.). WEISS, C H . (1975). Investigación evalua- Instructional-Design. Theories and tiva: Métodos para determinar la Models: An overview of their current eficiencia de los programas en acción. status. Hillsdale. N.J. London: Law- México: Trillas. rence E r l b a u m Associates, Publis- WEISS, C H . y BUCUVALAS, M.J. (1989). hers. 487 pp. "Truth tests and utility tests: Decision- ROSSI, P H . y FREEMAN, H.E. (1993). makers'frame of reference for social Evaluation: A systematic approach. (5a science research". En H.E.Freeman y ed.). Newbury Park, CA: Sage. M.A.Solomon (Eds.). Evaluation stu- SCRIVEN, M. (1991). Evaluation thesau- dies review a n n u a l , 6,(695-706). rus. Newbury Park, CA: Sage. Beverly Hills, CA: Sage.
  • 19. LA IEORÍA DE LA EVALUACIÓN DE PROGRAMAS 91 RESUMEN En este trabajo sobre La teoría de la evaluación de programas comenza- mos realizando una revisión de la situación actual de la evaluación como disciplina de conocimiento, mencionando sus elementos constitutivos, para centramos, a continuación, en la evolución que ha seguido la disci- plina de la Evaluación de programas, volcada en un primer momento en los métodos de investigación contribuyendo a su desarrollo adaptado a la problemática evaluativa y, posteriormente, en el desarrollo de la teoría de la evaluación de programas, fundamental en toda disciplina científica, que orienta la elaboración de los programas sociales y educativos, clarifica los procesos y las metas de la evaluación, comprueba su realización práctica y resultados, asesora en la mejora de los programas y contribuye, en definiti- va, a la construcción del conocimiento. Palabras clave: Teoría de la evaluación de programas. Evaluación como disciplina de conocimiento. Métodos de investigación adaptados a la evaluación de programas. ABSTRACT This paper is about Program Evaluation Theory. It shows, at the beginning, an overview on Evaluation as knowledge discipline, analyzing their constitutive elements. Then, we focus on the development of Pro- gram Evaluation, with one special interest, in the 60's, on research me- thods, with one important contribution to develop appropriate methods to the special evaluation questions and issues, and in the 80's involved on the development of Program Theory, one of the elements constitutive of the knowledge discipline, to guide the construction of social and educative programs, its goals, its implementation and outcomes, and to guide the decisión making, to change and improve programs, and thus, to contribute to the construction of knowledge. Key words: Program Evaluation Theory. Evaluation as knowledge disci- pline. Research methods appropriate to program evaluation.