Universidad de Costa Rica

Sistema de Estudios de Posgrado

Maestra en Evaluacin de programas y proyectos de desarrollo
Curso: Fundamentos ontolgicos y epistemolgicos de la evaluacin
Profesora: Dra. Jacqueline Garca Fallas

Reflexiones en torno a
la Evaluacin centrada
en el Uso, propuesta
por Michael Patton
Mara Alejandra Escalona - Carn A41920

En el presente ensayo se presenta un anlisis del modelo de Evaluacin centrada en

el uso, desarrollado por el socilogo estadounidense Michael Quinn Patton. Tomando
en cuenta aspectos de su biografa y obra, se analiza el concepto de evaluacin que
propone el autor, su manera de relacionarse con el objeto de evaluacin y cmo se
construye conocimiento sobre el mismo. Por ltimo, se revisan los valores y
desempeos que describen el rol del evaluador en este modelo. La informacin que
se presenta fue obtenida en el marco de una investigacin documental.

Abril, 2015
INTRODUCCIN

El presente ensayo est motivado en conocer y proponer discusiones alrededor

del modelo de evaluacin centrada en el uso, desarrollado por el socilogo
estadounidense Michel Quinn Patton. En el marco de un proceso formativo en la
disciplina evaluativa, la revisin de los aportes del autor se coloca como una tarea
imprescindible, no slo porque se trata de un prolfico cuerpo de conocimiento,
sino porque actualmente se considera uno de los modelos y perspectivas ms
influyentes en el campo.

A partir de un anlisis documental se revisan las premisas del modelo siguiendo

criterios ontolgicos, epistemolgicos, metodolgicos y axiolgicos, cada uno de
los cuales corresponde a un apartado del presente texto. Se procura destacar las
virtudes, as como los cuestionamientos ante un modelo que reivindica a los
usuarios y establece como eje trasversal y prioritario, el uso de la evaluacin. A
manera de cierre, en el ltimo apartado se brinda un balance general sobre el
anlisis realizado.

EL AUTOR Y SU MODELO DE EVALUACIN CENTRADA EN EL USO

Michael Quinn Patton, de origen estadounidense, estudi Sociologa en la

Universidad de Wisconsin, obteniendo su bachillerato, una Maestra en Sociologa
Rural y un doctorado en Sociologa (Sage, 2015).

Fue miembro de la facultad de la Universidad de Minnesota por 18 aos (1973-

1991), donde fungi como Director del Minnesota Center for Social Research por
cinco aos y colabor otros diez en el servicio de extensin de dicha institucin.
En este periodo fue electo presidente de la American Evaluation Association,
posicin que ocup en 1988 (Moleko, 2011).

Su obra es prolfica, y ha sido reconocido por su labor docente (Morse-Amoco

Award, en la Universidad de Minnesota), por su contribucin a la prctica y la
teora evaluativa (Alva and Gunner Myrdal Award de la Evaluation Research
Society; el Paul F. Lazarfeld Award de la American Evaluation Association) y ms

2
recientemente por su aporte a la Sociologa aplicada (Lester F. Ward Award de la
Society for Applied Sociology) (Sage, 2015).

Actualmente se desempea como consultor independiente y se dedica a impartir

talleres formativos para la American Evaluation Association, la Universidad de
Claremont y el International Program por Development Evaluation Training, del
cual es miembro fundador. Este ltimo, es patrocinado por el Banco Mundial y
otros organismos internacionales (Sage, 2015).

Para Patton (2010) las evaluaciones deben valorarse de acuerdo con cuatro
criterios principales:

- Su utilidad, considerando que la evaluacin debe ser relevante y til.

- Su factibilidad, pues la evaluacin debe ser realista, prudente, diplomtica y
sobria.
- Su precisin: la evaluacin debe ser tcnicamente adecuada para determinar
el mrito o valor.
- Debe ser apropiada: la evaluacin debe ser respetuosa y cumplir con criterios
ticos y legales.

En relacin con el nfasis que el autor le otorga al primero de estos criterios, en el

presente ensayo interesa analizar las premisas del modelo evaluativo que ha
promovido el autor desde finales de la dcada de los setentas: la evaluacin
centrada en el uso, o la Utilization Focused Evaluation, como es conocida en el
idioma Ingls1. Se valorar dicho planteamiento considerando criterios
ontolgicos, epistemolgicos, metodolgicos y axiolgicos, sin dejar de lado que
stos se entrelazan y complementan. Como parte de este ejercicio, se expondr
desde un punto de vista personal un juicio valorativo sobre las virtudes y bemoles
de la propuesta del autor.

ONTOLOGA: EL USO COMO PROCESO Y PROPSITO DE LA EVALUACIN

Como punto de partida para entender el concepto de evaluacin que plantea

Patton, es importante conocer sus influencias iniciales. Moleko (2011), analiz que

1
Debido a que la obra del autor se encuentra en el idioma Ingls, se hizo una traduccin de los textos
disponibles que se consideraron ms relevantes, procurando mantener el sentido original con el que fueron
planteados.

3
siendo estudiante, este evaluador se interes por la Sociologa organizacional,
especficamente en temas relacionados con la gestin del cambio y los conflictos
asociados a la transicin de una manera de hacer las cosas, a otra.

De igual manera, captaron su atencin teoras sobre el Poder desarrolladas por

autores como Michael Crozier, que le ayudaron a concebir el conocimiento como
fuente de poder para las personas. Esto incidi en que su perspectiva sobre la
evaluacin considerara premisas como El uso de la evaluacin ocurre en
proporcin directa a su capacidad de empoderamiento (Patton, 2004, en Moleko,
2011, p.14). Este poder se relaciona con el inters de los stakeholders2 por reducir
la incertidumbre, sobretodo de aquellos que cuentan con experiencia directa en los
temas a tratar, y para quienes la evaluacin sera particularmente til.

Patton tambin rescat los aportes de Everett Rogers sobre la difusin de las
innovaciones, por considerarla esencial para la adopcin y diseminacin de ideas.
Tambin se interes en el rol que propone el autor para los agentes de cambio y
se vio influenciado por su visin de desarrollo, entendido como un proceso
participativo de cambio en el que la sociedad avanza social y materialmente a
travs de un mayor control del entorno por parte de la gente (Moleko, 2011).

Una cuarta influencia identificada por Moleko (2011) fue el pragmatismo que John
Dewey propuso en el campo educativo. Luego de comparar la educacin
tradicional con posturas ms progresistas sobre el contenido y la metodologa
empleada en los sistemas educativos, este ltimo autor valor que la educacin
debe formar individuos para que sean miembros efectivos en la sociedad
democrtica. En este sentido, los educadores deben brindar a los estudiantes
experiencias valiosas en su quehacer inmediato, sobre todo aquellas que les
permitan contribuir a una mejor sociedad. Es decir, que los contenidos que se
aprenden tienen un correlato prctico cercano.

Lo anterior contribuye a dimensionar que para Patton (2010) las evaluaciones

deben ser juzgadas por su utilidad real. En su modelo, concebido como un marco

2
Se entender por el trmino stakeholders aquel grupo de personas con alguna cuota de inters en la
evaluacin o el proyecto en cuestin.

4
para la toma de decisiones que promueve la utilidad y el uso mismo de las
evaluaciones, stas deben ser diseadas y facilitadas con una cuidadosa
consideracin de cmo todo lo que se har, de principio a fin, afectar su uso.

En trminos prcticos, el uso que define el autor es distinto de hacer reportes o de

divulgar resultados de la evaluacin. Este uso es ms un proceso, cuyas
expectativas y acuerdos deben establecerse junto a los stakeholders desde el
inicio. En esta lnea, una de las premisas del modelo es que la evaluacin debe
realizarse desde el diseo del programa, pues desde ese momento se requiere
contar con informacin que sea pertinente para clarificar los objetivos de la
iniciativa y sus lneas de accin; es decir, la teora del programa y su ruta al
cambio (Patton, 2010).

Incluso, el autor apunta a un proceso de uso de la evaluacin (process use) el

cual remite a cambios en el pensamiento y el comportamiento de los stakeholders
involucrados en la evaluacin, y en los procedimientos y la cultura organizacional
producto del aprendizaje generado durante el proceso de evaluacin. Para su
puesta en prctica se debe revisar cmo la evaluacin contribuira a elaborar una
visin compartida respecto al programa evaluado, cmo puede apoyar y reforzar la
intervencin, fortalecer habilidades, conocimiento, autoeficacia y apropiacin de
las personas involucradas, y qu efectos pueden tener las mediciones que se
realicen en la dinmica organizacional (Patton, 2010, 2013a).

Como resultado del proceso evaluativo, Patton esperara escuchar expresiones

como: el impacto de nuestro programa no vino mucho de los resultados, sino de
pasar por el proceso de pensamiento que requiere la evaluacin (Patton, 2010,
p.31). Este tipo de cambios no sucedern naturalmente o automticamente, sino
que deben ser facilitados por el evaluador.

Como tal, la meta del modelo consiste en el uso previsto de la evaluacin, por
parte de los usuarios previstos (intended use by intended users). Para ello, uno
de los primeros pasos en la realizacin de una evaluacin centrada en el uso, es
identificar, reconocer e involucrar a los usuarios prioritarios de la evaluacin
suponiendo que es ms probable que el proceso sea til si se involucra a los

5
usuarios de manera significativa, de manera que se apropien de la evaluacin, si
encuentran preguntas relevantes y se interesan por los hallazgos (Patton, 2013).

En esta identificacin se hace una especie de filtro, pasando de tener una

audiencia, a tener un grupo de stakeholders, para finalmente identificar a quienes
tienen una participacin directa y reconocible en la evaluacin. Ser indispensable
involucrarlos durante el proceso, al priorizar interrogantes, plantear el diseo
metodolgico, interpretar datos y dar seguimiento; aclarndoles la importancia de
su rol y procurando mantener su inters (Patton, 2010, 2013a).

Aunado a esto, en este modelo es particularmente importante identificar cules

son los usos posibles de la evaluacin que se solicita, y priorizarlos. Patton (2010)
es enftico en que no se puede cumplir con todos los propsitos o intereses de los
stakeholders, sino que se deben priorizar para evitar ambigedades y confusiones.

De manera consecuente con el fin ltimo del modelo, es interesante la apertura

que el autor muestra al contemplar que una evaluacin puede ser til para
mejorar del programa (formativas), para favorecer la toma de decisiones a partir
de juicios sobre el mrito, el valor o el significado (sumativas), para la rendicin de
cuentas, el monitoreo o la generacin de conocimiento a travs de la identificacin
de buenas prcticas y lecciones aprendidas (Patton, 2013a).

Quiz gracias a lo anterior, y al nfasis en algo tan funcional como el uso, es que
Patton ha podido contribuir, a travs de investigaciones aplicadas y evaluaciones,
en temticas tan variadas como la lucha contra la pobreza, el desarrollo del
liderazgo, educacin, medio ambiente, salud pblica y mental, la extensin
agrcola, la justicia penal, el desarrollo comunitario, el cambio de sistemas, la
eficacia de polticas pblicas, la gestin por resultados e indicadores de
desempeo. De igual manera, ha logrado involucrarse con organizaciones y
programas a nivel local, provincial, estatal e internacional, de tipo filantrpico, sin
fines de lucro, privadas y gubernamentales (Sage, 2015). Es decir que el modelo
planteado por el autor tiene un amplio margen de aplicabilidad, una vez que el
contexto sugiera que es pertinente.

6
De esta manera, es posible inferir que, en trminos ontolgicos, para Patton
evaluar es un proceso participativo y formativo, en el que junto a usuarios clave en
un contexto organizacional especfico, se busca reducir la incertidumbre respecto
a un programa, favoreciendo el pensamiento evaluativo por parte de los
involucrados y a nivel de la cultura organizacional. Debido a que el modelo est
centrado en la utilizacin de la evaluacin, se trata de un planteamiento con un
amplio sentido pragmtico y con un interesante marco de aplicabilidad.

EPISTEMOLGICAMENTE, DEL POSITIVISMO AL PRAGMATISMO UTILITARIO

Al revisar los aportes del autor desde un punto de vista epistemolgico, uno de los
primeros aspectos que llama la atencin es la influencia de la formacin que tuvo
en Sociologa, tal como lo afirma en la siguiente frase: La Sociologa me dio una
slida formacin en mtodos cuantitativos, la construccin de teora, filosofa de la
ciencia y la sociologa del conocimiento, todos los cuales han influido en mi
pensamiento y prctica de la evaluacin (Patton, 2004 en Moleko, 2011: 12-13).

No obstante, al lado de esta formacin, otras experiencias educativas moldearan

su posicionamiento frente a sus objetos de estudio. Como parte de su tesis
doctoral evalu aulas abiertas en North Dakota (1972-1973), las cuales se
caracterizan por ser ms informales, orientadas al desarrollo de proyectos y con
mayor involucramiento de la comunidad; lo cual le hizo apreciar metodologas
cualitativas de la mano con la influencia del University of North Dakota Study
Group on Evaluation (Moleko, 2011).

Este acercamiento a las metodologas cualitativas se contrapuso a la formacin

que haba recibido en la Universidad de Wisconsin, y signific que realizara una
evaluacin cualitativa para los usuarios del estudio en los centros educativos, y
otra de corte cuantitativo (utilizando modelos de regresin linear) para cumplir con
las expectativas del comit evaluador de su tesis doctoral (Moleko, 2011). Este es
un primer indicio de que el autor no renunciara a ninguno de estos abordajes.

Al contrario, la difusin del conocimiento sobre estrategias metodolgicas de corte

naturalista se convertira en uno de los ejes de su trabajo y produccin acadmica.

7
Patton es reconocido, quiz no por haber innovado el campo metodolgico de la
evaluacin, sino por haberle dado voz a los mtodos cualitativos en una poca
en la que no eran valorados positivamente, integrando los aportes de otros
estudiosos en un frente coordinado y poco timorato (Moleko, 2011).

Al respecto, es importante notar cmo el autor evoluciona de una formacin

positivista, en la que se privilegia la metodologa cuantitativa y se apela a la
objetividad del investigador para construir conocimiento, hacia la consideracin
de fundamentos epistemolgicos constructivistas, con ciertos rasgos
emancipatorios, en los que se conciben realidades mltiples, construidas
socialmente, situadas en contexto, en las que se construye conocimiento junto a
los participantes.

Entre las influencias rastreadas por Moleko (2011) en la obra de Patton, se

identific a Egon Guba (miembro del University of North Dakota Study Group on
Evaluation), quien hacia finales de los 70s, analizaba los estudios experimentales
como cajas negras que no permiten conocer su proceso interior y critic las
condiciones artificiales y controladas de un ambiente de laboratorio. Al momento,
este autor empleaba mtodos cualitativos en el campo de la educacin, y los
defenda de manera asertiva, contundente y sin complejos.

Haciendo eco de esto, Patton analiz que los factores personales, humanos,
polticos y econmicos conspiran contra los ambientes controlados; y la
evaluacin, ms que pretender anularlos, debe responder al contexto en el que se
desarrolla. Poco tiempo despus, dedicara sus primeros esfuerzos a debatir la
imparcialidad con la que se privilegia el uso de mtodos cuantitativos en la
evaluacin, considerados el paradigma dominante en la construccin de
conocimiento cientfico (Moleko, 2011).

Adems de su consideracin contextual, uno de los elementos que muestra

posicionamientos construccionistas por parte del autor es su concepcin de la
Evaluacin centrada en el uso como un modelo entre muchos otros posibles, lo
cual implica su apertura para concebir mltiples realidades, as como mltiples
maneras de estudiarlas. En lnea con esto, al plantear los pasos y premisas

8
esenciales para llevar a cabo una evaluacin de este tipo, Patton (2013a) aclara
que stos no son lineales ni secuenciales, sino que se trata de un proceso
complejo, dinmico y adaptativo de las relaciones con los diversos elementos y
pasos que interactan.

Ms cercano a posturas emancipatorias, bajo las premisas de Patton (2013a), la

construccin de conocimiento til y relevante implica el involucramiento formativo
de los usuarios, la toma de decisiones conjunta, negociaciones y la priorizacin de
criterios en el proceso evaluativo en funcin de su uso. En el proceso, el evaluador
desempea un rol clave como facilitador en constante interaccin con los usuarios,
y se convierte en un instrumento. Para ello, debe valerse de factores personales
como experticia, experiencia y sensibilidad cultural para aportar significativa y
pertinentemente al trabajo que realiza. Es decir, que los valores y los
conocimientos terico-prcticos del evaluador median la produccin de
conocimiento, finalmente dirigido a su utilizacin en el contexto organizacional.

No obstante, desde un punto de vista emancipatorio es cuestionable el propsito

final de la evaluacin planteada por Patton. El autor propone que la evaluacin
procure apoyar el pensamiento evaluativo por parte de los usuarios, y en la cultura
organizacional en la que se desempean, en un modelo circunscrito al uso de la
evaluacin misma y sin perseguir, al menos deliberadamente, que dicho proceso
signifique la eliminacin o el favorecimiento de ciertas condiciones en la calidad de
vida de las personas. Esto genera ciertas dudas respecto a cuestiones ticas
relacionadas al planteamiento de Patton, que se abordarn en el apartado sobre
su visin axiolgica.

Finalmente, y a manera de enlace con la discusin sobre la metodologa empleada

por el autor, otro rasgo de carcter emancipatorio es la disposicin de Patton hacia
el uso de mtodos cualitativos y cuantitativos. El posicionamiento metodolgico del
autor termina siendo equilibrado, de alguna manera neutral y consistente en el
tiempo, apelando a que ms all del paradigma, lo importante es valorar cul
abordaje es el ms pertinente al objeto de estudio. En 1985, planteaba:

9
 Mi enfoque no es para tratar de resolver el debate entre paradigmas.
Trato de establecer un ambiente de tolerancia y respeto de los diferentes
puntos de vista, y luego centrar la discusin en la informacin real que
necesita cada grupo: puntajes en una prueba?, entrevistas?,
observaciones? El empleo de mltiples mtodos y medidas le dar a
cada grupo lo que quiere (Patton, 1985, en Moleko, 2011, p. 25).

De igual manera, hacia el cierre de uno de sus libros centrado en instruir sobre el
uso de mtodos cualitativos en evaluacin (How to Use Qualitative Methods in
Evaluation, 1987), afirm que con esta obra su intencin fue expandir el repertorio
metodolgico de los evaluadores ayudndoles a distinguir cundo son pertinentes
los abordajes cualitativos y cmo se desarrollan de manera que se produzca
informacin til y vlida; lo cual se aleja de un intento por argumentar que son
mejores. Incluso, cuando analiza la comn predileccin de los stakeholders por
datos cuantitativos, Patton destaca que se debe evitar ser anti nmeros, sino que
se debe ser pro significado, procurando que se enfatice en las preguntas y en la
informacin realmente importantes sobre el programa.

De lo anterior, es posible inferir que el planteamiento epistemolgico del autor es

definitivamente fenomenolgico, con bases constructivistas, y enriquecido con
ciertos rasgos de carcter emancipatorio, relacionados con el uso de metodologas
tanto cualitativas como cuantitativas, y la actuacin facilitadora del evaluador en el
proceso de construccin del conocimiento.

Dicho esto, cabe acotar que siendo un modelo est centrado en la utilizacin, y
que hay cierta renuencia del autor a privilegiar un mtodo sobre otro, es
comprensible que Patton declare su posicionamiento como un pragmatismo
utilitario (Patton, en Moleko, 2011), segn el cual un investigador o evaluador en
no est alineado a cualquier filosofa ideolgica, sino que emplea cualquier modelo
que promueva el uso. Patton dice que el foco del utilitarismo pragmtico es
responder a preguntas concretas utilizando mtodos prcticos y anlisis directos,
reconociendo criterios de precisin y confiabilidad de la informacin, as como su
pertinencia y utilidad. De acuerdo con esto, y como se ha dicho anteriormente,
para ello se requiere elaborar las preguntas evaluativas en contexto y como

10
respuesta a necesidades especficas de los usuarios, dominar el uso de diversas
metodologas, y creatividad.

Ante esto, desde un punto de vista personal, considero que slo de la mano con
criterios metodolgicos slidos, y las condiciones necesarias para que la
informacin recolectada sea vlida y confiable, es posible concebir que la prctica
investigativa o evaluativa deba estar estrictamente sujeta al uso de la informacin.

METODOLOGA: LA PERTINENCIA DE LA EVALUACIN COMO REGLA DE ORO

De manera congruente con lo planteado en los apartados previos, la metodologa

que propone el autor para desarrollar evaluaciones centradas en el uso mantiene
el pragmatismo que caracteriza el modelo, y promueve la gestin de condiciones
que favorezcan y hagan sostenible el uso intencionado de la evaluacin por parte
de los usuarios previstos, tal como es concebida.

Como se ha dicho, todava en aos recientes el autor sostiene que la regla de

oro en la evaluacin es la pertinencia metodolgica, ms que la ortodoxia o la
rigidez, por cuanto considera que no existe un mtodo universalmente fuerte y
que hay mltiples maneras de establecer causalidad. Para l, el reto metodolgico
consiste en empatar el diseo de la evaluacin, con el propsito del programa, los
recursos disponibles y el cronograma en el que se debe trabajar, con el fin de
optimizar el uso de la evaluacin (Patton, 2010, 2013a). Parte de esto tambin
vendr derivado del involucramiento de los usuarios en prcticamente todas las
decisiones sobre la evaluacin.

Un paso inicial es la valoracin y el fortalecimiento de las condiciones del

programa o de la organizacin para una evaluacin centrada en el uso, lo cual
implica examinar la receptividad a un proceso evaluativo. La premisa subyacente
es que el uso de la evaluacin es ms probable cuando los usuarios directos de la
evaluacin estn interesados en contar con evidencias, piensan de manera
evaluativa y en cmo usar los hallazgos. Patton (2013a) prioriza el factor
personal en la evaluacin, segn el cual la gente es el elemento central en el uso
que se pretende.

11
En segundo lugar, el anlisis profundo del contexto hace que la evaluacin sea
realista, y sucede de la mano con los usuarios primarios de la evaluacin,
identificando, valorando, comprendiendo y actuando junto a ellos en los factores
situacionales que marcan la dinmica organizacional, y el proceso evaluativo
(Patton, 2013a).

Junto a los usuarios tambin se definen aspectos elementales del diseo

evaluativo, por ejemplo, al precisar y priorizar las interrogantes de evaluacin.
Aqu la clave radica en que la evaluacin no puede valorarlo todo, y se deben
elaborar las preguntas considerando las posibilidades reales de responderlas de
manera oportuna, a un costo razonable y de manera que favorezcan la
comprensin, la toma de decisiones y acciones sobre el programa (Patton, 2013a).
Este paso es valioso, no solo en este modelo evaluativo, sino en trminos de la
viabilidad de cualquier evaluacin.

Un aspecto que debe cuidar el evaluador es que el abordaje de las preguntas de

evaluacin sea apropiado, en trminos de la etapa de desarrollo del proyecto y las
acciones que se puedan tomar a partir de la informacin analizada (en el caso de
preguntas respecto a su implementacin); sus condiciones de evaluabilidad 3 (en
caso que interese conocer los resultados) y las posibilidades de establecer
causalidad (cuando interese establecer atribucin de los resultados al programa o
proyecto) considerando las dificultades que suele implicar la tarea de generar
evidencia confiable que apoye este tipo de juicios (Patton, 2013a). Es aqu donde
el criterio del evaluador parece entrar en juego ms evidentemente.

Una vez hecho esto, se debe negociar la seleccin de los mtodos adecuados
para generar hallazgos confiables, de manera que apoyen el uso de la evaluacin
por parte de los usuarios prioritarios, y asegurndose que stos comprendan las
implicaciones de la decisin. Este es sin duda un paso clave en trminos
metodolgicos, y cabe notar que, a diferencia de esquemas en los que puede
considerarse al evaluador como experto y nico responsable de este tipo de
decisiones, en este modelo debe realizarse considerando el criterio de los
3
Implica que los objetivos del programa estn planteados de manera especfica y medible, que sean
alcanzables, relevantes y situados temporalmente (Patton, 2013).

12
principales involucrados. Esta no es una decisin que el evaluador pueda
determinar por su cuenta o imponer, pero s debe ser vigilante de criterios de
calidad para la evaluacin, atendiendo la calidad del dato, su confiabilidad y
utilidad (Patton, 2013a).

Al respecto, es importante el criterio metodolgico que el evaluador logre

establecer en relacin con las demandas que se plantean al proceso. Por ejemplo,
en anlisis recientes acerca de las tendencias contemporneas sobre el uso de
mtodos cualitativos, Patton (2013b) advierte que la solicitud de contar con
informacin til, bajo cronogramas estrechos y en estudios grandes en varias
sedes, est conduciendo a la recopilacin de informacin superficial a travs de
entrevistas, y estrategias como la observacin participante es menos empleada.
Esto hace que la estrategia metodolgica cualitativa se est realizando sin un
sustento terico importante, lo cual parece preocupante para el autor.

Un aspecto clave en este paso es la formacin que el evaluador debe favorecer en

los usuarios, respecto a las alternativas metodolgicas posibles, las fortalezas y
virtudes de los abordajes y controversias alrededor de esta decisin, procurando
sostener debates prcticos y tiles, no acadmicos o pedantes al respecto. El
autor sostiene que los usuarios deberan conocer las implicaciones que la decisin
del mtodo puede tener en la credibilidad de la evaluacin, con base en cierto
conocimiento sobre el uso de datos cuantitativos y cualitativos, diseos
experimentales y no experimentales, la aleatorizacin o la seleccin de casos, el
establecimiento de generalizaciones o consideraciones sensibles al contexto y
mantener posturas ms pragmticas ms rgidas metodolgicamente (Patton,
2013a).

Sin duda, lo anterior se coloca como un reto para el evaluador, en trminos del
dominio epistemolgico y metodolgico que esto implica, sumado a la labor de
ensearlo a los usuarios de la evaluacin en trminos cercanos y prcticos para
ellos.

Al momento de realizar la recoleccin de datos, Patton (2013a) plantea la

importancia de gestionar adecuadamente el proceso, capacitando a quienes

13
participen en este paso, cuidando la calidad del dato y la credibilidad de la
evaluacin. Tambin ser importante estar al tanto de los problemas que surjan y
corregirlos, adaptando los mtodos a cambios que sucedan en el contexto. Este
paso, as como los anteriores, implica un proceso de constante comunicacin con
los usuarios, con el fin de informarles y mantenerlos involucrados, al comentarles
hallazgos preliminares, por ejemplo.

En el anlisis de la informacin y la socializacin de los resultados tambin son

evidentes la rigurosidad metodolgica y el pragmatismo el autor. Con base en la
primera, Patton apela a la triangulacin de los datos bajo la consideracin de que
ningn mtodo por s solo resuelve el problema de las explicaciones rivales con
las cuales comprender hallazgos, adems de que cada uno revela distintos
aspectos de la realidad emprica. En esta lnea, an sabiendo que son costosas en
tiempo y esfuerzo, motiva la triangulacin por medio del uso de distintos mtodos,
fuentes de informacin, que varios analistas brinden su criterio sobre la misma
informacin, o valindose de distintas teoras (Patton, 1987, 2013a).

En lnea con el pragmatismo, Patton (2013a) apunta que la organizacin y

presentacin de los hallazgos debe facilitar la interpretacin por parte de los
usuarios prioritarios, contemplando emplear distintos formatos de manera creativa
y pertinente a la audiencia. El momento de reportar informacin debe ser
oportuno, y tambin seala la importancia de emplear recursos que permitan
visualizar la complejidad de la informacin, sobre todo de tipo cualitativo, pues los
usuarios deberan involucrarse en la generacin de juicios evaluativos y en el
planteamiento de recomendaciones.

Una vez hecho esto, ser importante darle seguimiento a la evaluacin. En este
sentido, el reporte de los hallazgos no es final del proceso, y ms bien debe
motivarse su continuacin a travs de la aplicacin del conocimiento generado y la
implementacin de las recomendaciones planteadas. Con el fin de promover el
uso continuo de la evaluacin, tambin se debe estar atento a datos y preguntas
emergentes, o a nuevas audiencias que puedan interesarse en los resultados del
proceso (Patton, 2013a).

14
A partir de lo anterior se estima que un elemento de dificultad en el planteamiento
metodolgico de este modelo es el tiempo que implica para los usuarios, la
organizacin y el evaluador su involucramiento cercano y concienzudo en el
proceso antes descrito. Quiz de ah venga el nfasis de Patton en valorar la
receptividad hacia la evaluacin desde el momento inicial, as como la importancia
de mantener el inters y compromiso en la misma durante el proceso. Sin duda,
esto se coloca como un criterio de viabilidad al pretender seguir este modelo al
realizar una evaluacin.

A manera de sntesis, cabe decir que consistentemente con su perspectiva

ontolgica en cuanto a cmo debe ser la evaluacin, y su punto de vista
epistemolgico, la metodologa dentro del modelo planteado por Patton tiene como
eje trasversal el uso de la evaluacin, pues con este criterio se deben tomar las
decisiones respecto al diseo de la evaluacin, qu tipo de datos interesan y cmo
deben recolectarse y analizarse. Otro aspecto nodal es el involucramiento y la
participacin de los usuarios en el proceso anterior, en alianza con la riguridad que
debe procurar el evaluador para garantizar la calidad y confiablidad de los datos.
La interaccin entre stos tres elementos es lo que parece garantizar, o procurar,
que la evaluacin sea pertinente, vlida y que cuente con credibilidad entre los
usuarios.

AXIOLOGA: ENTRE LA RIGUROSIDAD Y LOS VALORES PROPIOS DEL EVALUADOR

A este punto es claro que en el modelo de evaluacin centrada en el uso,

planteado por Michael Patton, tiene como finalidad motivar la utilizacin del
proceso en los usuarios del mismo; propsito que adems se coloca de manera
trasversal al concepto de evaluacin y la metodologa sugerida por el autor. Ahora
bien, tambin es posible identificar algunos de los valores que se desprenden de
este marco evaluativo analizando la especie de perfil de evaluador que describe
Patton en distintos textos.

Para empezar, Patton (2010) concibe que el uso que se haga de la evaluacin es
parte de la rendicin de cuentas de la evaluacin misma, y es parte del desarrollo

15
profesional continuo de quien la facilita. Muestra de ello es que se coloque la
metaevaluacin del proceso realizado como uno de los ltimos pasos del mismo,
dirigido a hacerse responsable, aprender y mejorar (2013a).

Segn establece, la metaevaluacin debe ser tomada en serio y de manera

sistemtica, destinando el tiempo necesario para ello. Esto sera parte del
compromiso con una prctica profesional reflexiva respecto a qu sali bien y no
tan bien durante la evaluacin, cules fueron las competencias y habilidades que
requera el proceso y cules entraron realmente en juego, y usar dicho aprendizaje
para mejorar sus prcticas (Patton, 2013a).

Eso implica una figura de responsabilidad y compromiso con la mejora continua y

con la profesionalizacin de la prctica evaluativa. En lnea con esto, tal como se
anot en el apartado metodolgico, el ejercicio de facilitar un proceso evaluativo
bajo este modelo implica una formacin slida en discusiones epistemolgicas,
conceptuales y metodolgicas, as como la elaboracin de un criterio propio segn
el cual formar y apoyar el conocimiento de los usuarios en la materia.

No por ello el evaluador ser un metodlogo, sino que tambin deber reunir una
serie de atributos sociales necesarios para establecer una relacin emptica, de
cercana y acompaamiento pertinente con los usuarios. De tal manera lo expres
en una entrevista en la que se le consult por las principales competencias que
debe tener un evaluador para mantenerse al ritmo de las nuevas tendencias:

"Los evaluadores no slo tienen que ser metodolgicamente

competentes, sino tambin tener habilidades para analizar situaciones,
tener sensibilidad cultural en su trabajo, ser polticamente consciente
de cmo se utilizan los datos y mtodos en la era del conocimiento, y
entender cmo se cruza de evaluacin con la poltica en todos los
niveles. Adems, los evaluadores tienen que ser muy buenos
comunicadores y facilitadores, al menos si estn haciendo la
evaluacin centrada en la utilizacin y con el objetivo de trabajar con
las familias y los miembros de la comunidad de una manera
mutuamente respetuosas y tiles" (Patton, en Coffman, 2002)4.

4
Entrevista realizada en el marco de una publicacin enfocada en proyectos de apoyo a familias en Estados
Unidos.

16
En lnea con las demandas que plantea este modelo a la figura del evaluador, en
textos ms recientes, Patton (2013a) incluso apunta que uno de los primeros
pasos para desarrollar un proceso evaluativo centrado en la utilizacin consiste en
valorar y motivar la preparacin del evaluador para asumirla. La premisa consiste
en que se requieren habilidades y una filosofa particular para ello, las cuales
concretiza en la siguiente lista:

1. Conocimiento de la prctica profesional.

2. Habilidades para la investigacin sistemtica.
3. Habilidades para el anlisis de situacin.
4. Habilidades para la administracin de proyectos.
5. Competencias para la prctica reflexiva.
6. Habilidades interpersonales.
7. Sensibilidad cultural (cultural competence).

De manera interesante, Moleko (2011) logr rastrear que la sensibilidad cultural a

la cual apela Patton tiene races en su experiencia como voluntario en el Cuerpo
de Paz en Burkina Faso a finales de los sesentas. Segn expres el mismo
Patton, esta vivencia enriqueci su empata, sus habilidades personales y
organizativas, as como su sentido pragmtico. De ah, tambin se establece su
privilegio a los usuarios intencionados de la evaluacin, pues desde ese
momento determin que su nicho sera facilitar el uso de la evaluacin por parte
de otras personas, entre las que debe considerarse la poblacin beneficiaria
directa.

Ahora, un aspecto digno de analizar es la dimensin tica y poltica de este

modelo, que el mismo Patton destaca como elemento que atraviesa la evaluacin.
Segn analiz Moleko (2011), este planteamiento tiene implcito el riesgo del
"clientelismo", segn el cual el evaluador, o el proceso mismo, podran convertirse
en una herramienta poltica de intereses particulares, sobre todo debido a la
importancia otorgada a los usuarios y a la informacin que stos requieran. Si bien
esto puede suceder con cualquier modelo evaluativo, la visin parcializado que
ste implica, coloca el uso de la evaluacin como un tema ticamente sensible.

17
Como tambin report Moleko (2011), cuando se le ha planteado este tipo de
cuestionamientos a Patton, su respuesta ha remitido a que desde el inicio de la
evaluacin, cuando se est analizando el contexto y el uso pretendido del proceso,
el evaluador debe ser "deliberado e intencional" respecto sus posicionamientos
ticos y morales, consultando y aclarando cules son los intereses detrs de la
evaluacin, de quines provienen y quin podr tener acceso a los resultados. Es
en este momento que la integridad del evaluador entra en juego, de la mano con el
respeto a los principios profesionales y a las necesidades y creencias de los
usuarios primarios.

Ante esta postura, cabe preguntarse cul sera la accin correcta en caso de no
haber coincidencia en los criterios ticos y morales alrededor del uso de la
informacin generada en el proceso. En este sentido, Moleko (2011) estima que la
recomendacin de Patton sera retirarse de la evaluacin, pues el este podra
convertirse en un obstculo para el uso.

En relacin con cuestiones ticas, Patton (2013b) ha sido ms claro respecto a

temas como la anticipacin del impacto que tendrn los resultados sobre los
participantes, la confidencialidad de la informacin cuando se trabaja con
muestras pequeas, o la compensacin por participar en la recoleccin de datos.
No as, en aspectos relacionados con usos no previstos, y quiz polmicos, de la
informacin generada, y cul debera ser la posicin del evaluador al respecto.

Por tanto, como parte del anlisis axiolgico, se considera valiosa la exigencia de
dominio conceptual y metodolgico que plantea este modelo a la figura del
evaluador, as como las habilidades interpersonales que tambin plantea como
necesarias para desarrollar el proceso de manera responsable y pertinente. No
obstante, dentro del modelo, parece ser el criterio tico y moral de cada facilitador
el que determinar su participacin en los procesos evaluativos, pues no se
plantea un "propsito ulterior" de la evaluacin (como sucedera desde
posicionamientos emancipatorios) y el uso de stos por parte de los usuarios
previstos es el criterio que parece imperar.

18
REFLEXIONES Y CONSIDERACIONES FINALES

El modelo de la Evaluacin centrada en el uso, planteado por Patton es

consistente en su perspectiva ontolgica, epistemolgica, metodolgica y
axiolgica, al colocar como eje trasversal y prioritario la utilizacin del proceso por
parte de los usuarios. Ontolgicamente, la evaluacin que propone Patton consiste
en un proceso dinmico, contextualizado, participativo, adaptativo y dirigido a
motivar el pensamiento evaluativo entre los involucrados en el mismo. De la mano
con privilegiar la elaboracin de criterios y la toma de decisiones junto a los
usuarios, desde un punto de vista epistemolgico el modelo tiene bases
construccionistas, y se nutre de ciertos rasgos emancipatorios, relacionados con el
uso de metodologas tanto cualitativas como cuantitativas, y la actuacin
facilitadora del evaluador en el proceso de construccin del conocimiento.

Metodolgicamente, la propuesta es interesante, en parte por la anuencia a

trabajar desde diseos mixtos, privilegiando que el abordaje del objeto de
evaluacin de inters para los usuarios sea el adecuado, y el que permita generar
la informacin necesaria. Adems, plantea un reto importante para el evaluador
pues debe tener dominio y criterio propio sobre las estrategias posibles, las
fortalezas y virtudes de los abordajes y controversias alrededor de las decisiones
sobre el mtodo a emplear.

Esto ltimo ser fundamental para proteger la calidad de la informacin

recolectada, y por ende, de la evaluacin misma, en un marco que con la
priorizacin de los usuarios, corre el riesgo de caer en un pragmatismo excesivo.
Ante esto, el autor destaca la importancia de formar un criterio evaluativo tambin
en los usuarios, lo cual aunado a ser una tarea loable, puede convertirse en un
importante factor de sostenibilidad para los procesos evaluativos en una
organizacin.

Finalmente, tambin en la dimensin axiolgica del modelo la figura del evaluador

se torna fundamental, pues en l recae la determinacin de los criterios ticos y
morales que puedan entrar en juego en el proceso evaluativo. En este sentido se

19
torna crucial que el evaluador logre equilibrar de manera congruente sus valores
con el uso pretendido de la evaluacin por parte de los usuarios de la misma.

20
FUENTES DE INFORMACIN

Coffman, J. (2002). A conversation with Michael Quinn Patton. The Evaluation

Exchange. 8 (1), 10-11. Recuperado de: http://www.hfrp.org/evaluation/the-
evaluation-exchange/issue-archive/family-support/a-conversation-with-
michael-quinn-patton

Moleko, M. (2011). Influence and originality in Michael Quinn Pattons Utilization-

Focused Evaluation. (Tesis para optar por el grado de Maestra en Filosofa
de las mtodos en Ciencias Sociales). Stellenbosch University, Sur frica.

Patton, M. (1987). How to Use Qualitative Methods in Evaluation. California,

Estados Unidos: Sage Publications.

Patton, M. (2010, setiembre). Utilization-Focused Evaluation with Michael Quinn.

Recuperado de http://ccer.org/service/documents/Michael%20Patton/U-
FE%20workshop.pdf

Patton, M. (2013, enero). Utilization-Focused Evaluation (U-FE) Checklist .

Recuperado de: http://www.wmich.edu/evalctr/wp-
content/uploads/2010/05/UFE.pdf

Patton, M. (2013, octubre). The State of Qualitative Methods in the Early

21stCentury: Top Ten Developments Over the Last Decade and Emergent
Challenges. Presentacin realizada en el evento Evaluation 2013:
Evaluation Practice in the Early 21st Century. Recuperado de:
http://comm.eval.org/communities/resources/viewdocument/?DocumentKey
=724ee6ff-7860-45f7-a1b8-5ce9e1ead639

Sage Publications. (2015). Michael Quinn Patton. Recuperado de:

http://www.sagepub.com/authorDetails.nav?contribId=501968

21