Indice - Precedente - Siguiente
CONCEPTOS GENERALES
La evaluación mide los efectos del trabajo planificado y efectuado durante el proceso de extensión. La evaluación ayuda a los agentes de extensión y a los agricultores a contestar preguntas tales como:
* ¿Qué actividades planificadas hicimos?
* ¿Cuáles no?
* ¿Cuánto costó ésto?
* ¿Cuál fue el resultado de este trabajo?
* ¿Cuáles son los beneficios/efectos negativos de este trabajo?
* ¿Qué aprendimos?
* ¿Estamos más cerca de nuestra meta?
La evaluación, como la planificación y el trabajo, tiene que realizarse con los contrapartes de la comunidad. De hecho, la evaluación es la parte más relegada del proceso de extensión. La comunicación bilateral solamente puede ocurrir entre los científicos y las familias agrícolas cuando se efectúan evaluaciones a nivel de la comunidad y del campo del trabajo de extensión.
Investigación | ç è | extensión | ç è | agricultura |
Investigación | ç | extensión | ç | agricultura |
ë | ë | |||
Contrarreacción a los investigadores | Evaluación a nivel del campo |
La evaluación es el eslabón de cierre en la comunicación bilateral efectiva. La evaluación honesta y abierta del trabajo comunitario le brinda a las familias de los pequeños agricultores una voz real en el proceso de cambio y crecimiento.
Los resultados cuantitativos detallados del trabajo de extensión se pueden medir usando los instrumentos de planificación que aparecen como listas de cotejo al principio de este capitulo. Se puede evaluar entonces el progreso hacia las metas materiales. Hay metas más elevadas que las materiales. El progreso hacia las mismas es más difícil de describir y medir. Estas incluyen:
* aumento en la comunicación bilateral
* salirse gradualmente de un trabajo, o un aumento en la independencia competente de los agricultores
* exactitud ecológica del trabajo
* adecuacidad cultural del trabajo
* metas morales o espirituales
* disfrute o satisfacción personal
* relaciones con los co-trabajadores, familias agrícolas, comunidad anfitriona.
Todas estas metas tienen alguna relación con la meta general de la extensión agrícola como se ha descrito en este manual: ayudar a las familias de los pequeños agricultores a participar de manera creativa en el proceso de crecimiento y cambio.
Puede que se necesite consejo experto para evaluar el progreso hacia algunas de estas metas más elevadas, como por ejemplo, la exactitud ecológica. Muy pocos agentes de extensión al nivel de la villa tienen los recursos de sociología rural o antropología cultural para evaluar formalmente los efectos culturales del trabajo. Sin embargo, es importante el interés. Los issues filosóficos, espirituales y relacionales emergen muchas veces cuando los agentes de extensión y las familias agrícolas están envueltas en un proceso de cambio. De hecho, el desarrollo esta repleto de éstos. Estos issues no se pueden evaluar de forma normal, sino que tienen que animar al agente de extensión a pararse y considerar, pausar y reflexionar, y estar abierto al cambio cuando este ocurra. El aspecto más excitante y retador del trabajo de extensión consiste en ser el centro de cambio. El estar en el centro enfoca una enorme responsabilidad hacia los demás. La evaluación en todos los niveles, la consideración cuidadosa en todo lo que se hace, representan la responsabilidad e interés en acción.
Hay varios tipos de evaluación que se pueden realizar:
Observación diaria que produce una impresión subjetiva que puede ayudar a guiar el trabajo. Tal información se recoge de las conversaciones casuales en las visitas a las fincas y los hogares, reuniones y discusiones individuales.
Estudios informales que incluyen el repaso y análisis de la información obtenido de los registros, reportes, listas de cotejo, cuestionarios, censos, etc. Hechos periódicamente, estos estudios deben formar una base bastante objetiva para juzgar el trabajo de extensión. Pueden incluir también la reflexión periódica sobre las metas más elevadas descritas anteriormente.
Estudios formales más estructurados. Por lo general, éstos se planifican y efectúan siguiendo las normas científicas para proveer más información objetiva en el logro de los objetivos o la eficacia de los métodos usados. Estos estudios pueden incluir entrevistas formales, cuestionarios, colección y análisis de datos, etc. El análisis de costos y beneficios es un buen ejemplo de ésto (vea el Apéndice) así como los aspectos de "Estudio Agrícola" (vea el capítulo dos).
Algunos principios básicos sirven de base a la evaluación eficaz:
* La evaluación del trabajo de extensión debe ser bien planificada y claramente definida en cuanto a qué se va a evaluar en el programa.
* El personal de extensión y la gente de la comunidad deben tomar parte en la evaluación. La auto-evaluación ayuda a los que realizan un trabajo y se puede combinar bien con la evaluación de alguien de fuera.
* La evaluación diaria debe ser continua e integrada con el proceso de desarrollo del programa desde su planificación hasta el final.
* Se deben usar recursos confiables y efectivos, y se debe escoger una muestra representativa de acuerdo a los medios disponibles.
* La evaluación debe estar más orientada hacia el logro de cambios en el comportamiento que al número de participantes, reuniones, horas, artículos preparados, etc.
* El análisis y la interpretación cuidadosa de los hallazgos se debe tomar en cuenta al planificar un estudio de evaluación.
Ya que hay tantos aspectos para cada actividad de extensión, uno tiene que decidir cuáles son importantes en términos de evaluación. Algunos aspectos de la actividad de extensión son:
situación antes/después
planificación del programa
acción del programa
métodos
resultados
metas más elevadas
Al decidir cuál evaluar, resulta más fácil determinar qué método de evaluación usar.
Al evaluar, es importante hacer Juicios y conclusiones conservadoras. No importa cuán científico sea el recurso usado, o cuán objetivos sean los criterios para medir, cada evaluación efectuada por un agente de extensión es el punto de vista de una sola persona (o de varias personas solamente). No hay absolutos en el proceso de cambio, solamente probabilidades. El conocimiento critico y la franqueza en cuanto a los diversos puntos de vista es esencial para la interpretación adecuada de los resultados de la evaluación.
Lo más importante es la conciencia de que los miembros de la comunidad y los agricultores no han de ser estafados por los resultados de la evaluación. Muchas veces, el fracaso de un proyecto de extensión se le atribuye a la ignorancia o a la falta de cooperación del agricultor. Esto no siempre es así.
Debido a que es una tendencia que se ha observado en la evaluación del trabajo de extensión, los agentes de extensión deben estar cautelosos de estas conclusiones. De hecho, el asignarle la causa de cualquier resultado a una labor específica es a menudo engañoso o falto de previsión.
Al pasar tiempo y energía midiendo el efecto del trabajo de extensión a los varios niveles, los agentes de extensión pueden cerrar el eslabón final en la cadena de comunicación bilateral. Ponen a las familias en contacto directo con los científicos y otros agentes de cambio. Como los agentes catalíticos en el centro del proceso de cambio agrícola, los agentes de extensión tienen una inmensa responsabilidad hacia los demás, la cuál pueden convertir en acción mediante una evaluación sensitiva.
EJEMPLO
Mike había ayudado a un grupo de agricultores a preparar un pantano en un valle del interior para la producción de arroz en la temporada seca. Ellos habían limpiado el área, construido los diques y los arrozales, sembrando el arroz y desempeñando todas las labores de producción. Ahora correspondía evaluar los resultados de todo su trabajo.
Mike se sentía inseguro a medida que guiaba hacia la villa cercana a la finca de arroz. El había estado trabajando en otro lugar hace varios meses. Estaba deseoso de ver qué había pasado desde su última visita. Cuando entró a la villa, vió un rostro familiar. Era Mami, la esposa del agricultor principal. Ella le vió, pero se escondió enseguida. ¿Por qué? Mike detuvo su motocicleta. De pronto, mucha gente salió de las casas corriendo y riendo. Muchos de los agricultores y sus familias le rodearon y le recibieron con júbilo. Mike estaba abrumado y confundido. Uno de los agricultores dijo: "¡TU nos has dado tanto! Te estamos tan agradecidos!" Todos caminaron juntos hasta la finca.
Mike se preguntó si podría efectuar el análisis de muestras de los productos en cada acre de los agricultores que pensaba hacer antes de la siega. Se preguntó si éste era el momento adecuado para llevar a cabo cualquiera de las evaluaciones especificas que había ennumerado y planificado antes de venir. Todos se detuvieron al borde de la finca y observaron. Había una extensión de arroz madurando rodeado por huertos prósperos de vegetales. Mike estaba muy contento.
Después de un rato, la multitud se dispersó. Las familias se fueron a sus casas a cocinar, los agricultores atendieron sus huertos, y Mike pudo inspeccionar los detalles con el agricultor principal. Mike comenzó a formularle preguntas especificas sobre la temporada de cosecha. Escribió las respuestas. Entonces, Mike explicó lo que significa una muestra del producto, su importancia y cómo tomarla. El y el agricultor principal tomaron una muestra y acordaron hacerlo para cada agricultor durante la próxima visita. Entonces, Mike miró la presa, los diques, los canales de riego y las entradas. Condujo un diagnóstico de problemas de los huertos modelo en cuanto a enfermedades, insectos, toxicidad de hierro, problemas de riego o drenaje, crecimiento desbalanceado, etc. Documentó todas estas cosas en su libreta.
Mike le pidió a todos los agricultores que se reunieran debajo del árbol de mangó donde tantas veces habían descansado durante la preparación de la tierra y el trabajo de producción. Le formuló a los agricultores una serie de preguntas preparadas diseñadas a ayudar a los agricultores a revisar lo que hablan hecho. Enfocó sus preguntas especialmente en los resultados concretos de su propio esfuerzo, en cómo cada tarea de preparación del terreno o de producción resultó en algo especifico que ayudó al crecimiento del arroz y de los huertos. Se ocupó en una revisión de los sucesos de la temporada. En esta revisión, Mike se enteró de problemas específicos encontrados durante la temporada, y los agricultores pudieron ver la causa y efecto en acción.
Para cuando llegó la tarde y la comida a base de arroz estaba lista, ya Mike y los agricultores habían hablado largo y tendido sobre lo que había ocurrido. Mike se fue muy complacido en cuanto a los resultados de producción y otros resultados físicos del proyecto de la comunidad. El le ayudó a ver su habilidad para resolver más claramente los problemas agrícolas.
Mike pudo sentir la relación tan cálida que todos compartían. Estaba conturbado por el hecho de que los agricultores le atribulan el éxito a él personalmente. También se preguntaba sobre los efectos ecológicos del sistema de irrigación y de los métodos de cosecha en conjunto. Observó que los agricultores habían limpiado el trecho hacia la finca para que los camiones pudiesen sacar el arroz. Desafortunadamente, ésto le hacia más difícil a la anciana y al ciego que vivía cerca de la finca trabajar como habían acostumbrado. Estos tuvieron que mudarse. El camino también atrajo al colector de impuestos y al inspector de salud hasta la villa para sus respectivas labores. La pequeña villa de Bambaia se habla transformado. Mike se sintió insignificante cuando se fue.
INSTRUMENTOS (5)
1. Use los instrumentos de planificación en cada subcapítulo de este manual como listas de cotejo con las cuáles evaluar el progreso en el trabajo y los logros en tareas laborales especificas.
2. Factores a considerarse en la evaluación de extensión:
a. Personal
- líderes del proyecto de la comunidad
- evaluadores
- recursos externos
- gente de la comunidad¿Sabe cada uno su trabajo, el propósito de la evaluación, etc.? ¿Puede cada cuál hacer lo requerido?
b. Tiempo:
- ¿Es demasiado pronto para determinar si el proyecto o la actividad están funcionando bien? - - - - ¿Es éste el mejor tiempo para evaluar?
c. Instrumentos y métodos de evaluación:
- ¿Son los más adecuados y aplicables?
d. Finanzas y otros gastos:
- ¿Es ésta la forma menos costosa de evaluar eficazmente?
3. Preguntas relacionadas a cada aspecto del trabajo que se ha de evaluar:
Aspecto de la actividad de extensión | Preguntas |
análisis de la situación | * ¿Cuál es la situación antes y después de la actividad? |
planificación del programa | * ¿Cómo se planificó esta actividad? |
acción del programa | * ¿Quién hizo qué, cuándo? |
métodos | * ¿Cómo se efectuó este trabajo? |
resultados | *¿Cuáles son los resulta dos cuantitativos concretos de este trabajo? |
* ¿En qué proceso se incluyó cada cuál? | |
* ¿Cuáles pueden ser los resultados a largo plazo? | |
*¿Logró el trabajo las metas y objetivos declarados? | |
* ¿Se resolvió el problema especifico? | |
* ¿Qué problemas nuevos surgieron? |
4. Planificando y efectuando un estudio de evaluación
Estos pasos son esenciales en la planificación de un estudio de evaluación: (1) seleccione un problema que demande investigación; (2) formule claramente lo que se va a medir; (3) determine el tipo de información necesaria; (4) decida cómo recoger la información; y (5) planifique cómo ha de usarse la información.
Los siguientes puntos servirán como pautas al planificar y efectuar la evaluación de un programa de extensión.
A. Determine qué personal y recursos financieros están disponibles y son necesarios para efectuar la investigación.
- ¿qué tipo de cooperación se necesita de los recursos externos en cuanto al personal y el dinero?
- ¿cuánto tiempo se necesita para efectuar el estudio?
B. Seleccione y defina una parte del programa para estudiar.
- ¿qué objetivos o contenido del programa de extensión han de evaluarse?
- ¿qué fase de este programa se evaluará (por ejemplo, acción del programa, métodos de instrucción, resultados, etc.)?
- ¿será la evaluación de un programa particular o de un aspecto de un programa útil para el futuro?
- ¿será necesario recoger datos para la evaluación, o ya hay disponible información de otras fuentes?
C. Defina y clarifique los objetivos del estudio.
- ¿Qué evidencia se necesita para determinar que el programa educacional está logrando sus metas en cuanto al (a) número de logros, o (b) cambios en el comportamiento de la gente? ¿Cuáles son los indicadores más importantes del cambio en el comportamiento?
D. Decida cómo recoger la información y qué recursos se necesitan.
- ¿qué tipo de recursos se usarían (cuestionarios, formas de observaciones, etc.)?
- si se ha de usar un cuestionario, ¿qué preguntas se deben formular y como se deben frasear?
- prepare formas para registrar e instrucciones para usarlas
- preexamine los recursos y revíselos si es necesario.
E. Planifique la tabulación
- tipo de métodos de tabulación y tablas necesarias para descubrir relaciones.
- personal y equipo necesario para la tabulación.
F. Determine las muestras
- Defina la población de muestra
- Determine qué muestra se necesita y cuál está asequible.
- Prepare las instrucciones para tomar la muestra.
G. Prepárese para recoger la información
- ¿Quiénes están disponibles para recoger la información?
- Escoja a los entrevistadores y colectores de información.
- Determine qué tipo de adiestramiento necesitan para entrevistar, registrar, etc.
- Lleva a cabo el adiestramiento.
H. Recoda la información en el campo.
- Provea la supervisión necesaria
I. Redacte y tabule los datos obtenidos.
J. Interprete los hechos y prepare un informe.
- ¿Cuáles son los hallazgos importantes del estudio?
- ¿Se necesitan diferentes tipos de informes (por ejemplo, para profesionales y para no profesionales)?
K. Planifique el uso de los hallazgos.
- ¿Qué implicaciones podrían tener los hallazgos para el trabajo en el futuro?
5. Otro formato de las preguntas que usted puede formular
para evaluar un proyecto:
(Manual de Extensión Agrícola USAlD/Kenya)
Evaluando el proyecto
¡No se detenga! ¡Evalúe! La planificación nunca cesa. Por lo tanto, cada vez que se completa un proyecto o algún paso del programa, los participantes deben revisar lo que se ha hecho para asegurarse de que todo esté siguiendo el curso adecuado. Esto se conoce como evaluación y es un proceso continuo como la planificación. Usted tiene que evaluar los esfuerzos pasados para planificar los cambios.
Desarrolle un medio de evaluación al definir el objetivo y al preparar un Plan de Acción. Recuerde el estudio de la comunidad y las respuestas de los cuestionarios y estadísticas que usted haya obtenido como posibles fuentes de información para la evaluación.
Después de cada paso o actividad, formule preguntas como:
* ¿Cómo lo hicimos?
* Funcionaron bien los planes?
* ¿A qué debemos el éxito?
* ¿Por qué fracasamos?
* ¿Qué deberíamos estar haciendo ahora?
* ¿Qué es lo próximo que tenemos que hacer?
* Si cometimos errores, ¿podemos evitarlos en el futuro?
Estimule a los miembros de la comunidad a que comienzan a evaluar el proyecto poco después de su comienzo. ¿Está la gente usando las letrinas que se han instalado? ¿Están cuidando sus huertos de vegetales y comiendo sus productos? ¿Están los niños asistiendo de veras a la escuela? ¿Asistió el grupo para el cuál usted preparó las actividades?
Después que termina cada fase del proyecto, usted tiene que darle seguimiento para determinar su éxito. Al final, hágase usted mismo todas estas preguntas de nuevo. ¿Realizó el trabajo? ¿Qué se puede hacer para que sus esfuerzos sean más exitosos?
He aquí algunas clases de medidas que usted podría usar para evaluar su proyecto, si se planifica desde el principio:
1. Calidad o cantidad
a. ¿Cuántas personas se alcanzaron?
b. ¿Cuántos cartelones, panfletos y visitas al hogar se hicieron?2. Calidad - ¿Qué cree la gente?
a. líderes
b. participantes, miembros de la villa
c. otros trabajadores de salud
d. los pupilos3. Cambios en el conocimiento demostrados por:
a. discusión entre los agricultores
b. respuestas a preguntas formuladas por el agente de extensión4. Cambios en actitud:
a. Apoyo comunitario al programa.
b. Pedidos de mayor cooperación de parte de las agencias del gobierno.
c. Menor oposición de parte de grupos en la villa que hablan estado anteriormente opuestos al proyecto.
d. Censo de opinión pública.5. Cambios en el comportamiento, tales como:
a. Aumento en las visitas a la estación o al trabajador agrícola.
b. Mejores hábitos y condiciones observadas en las fincas.
c. Aumento en la producción.
d. Aumento en la venta de leche, carne, vegetales u otros alimentos buenos.
e. Mayor necesidad de apoyo después de la siega.
f. Mayor interés en el mercadeo.6. Cambios en la vida de la comunidad.
a. Mejor nutrición.
b. Excedentes de alimentos.
c. Señales de prosperidad económica (nuevas casas, bienes materiales)
d. Mejorías en salud mostradas en casos individuales
En el caso de la evaluación del trabajo de extensión, usted hallará que es difícil medir los resultados. El número de lecciones o demostraciones, y la habilidad de repetirlos no son la única medida. La meta es el cambio en el comportamiento. Sin embargo, estos cambios no son fáciles de evaluar inmediatamente ya que ocurren lentamente durante un largo periodo de tiempo.
Como siempre, en su trabajo con la comunidad, será necesario documentar sus observaciones. Esta es una forma de documentación escrita que ya usted ha hecho durante su investigación en la comunidad. Usted debe discutir con sus contrapartes la importancia de mantener buenos registros.
La evaluación del progreso de actividades complejas (como la extensión) nunca es una tarea sencilla, pero se puede facilitar definiendo claramente y temprano los objetivos del proyecto y relacionando su plan de evaluación directamente a esos objetivos. Con la planificación cuidadosa, los datos ayudarán a asegurar que el proyecto sea mejor administrado y que todos los que apoyan el esfuerzo, particularmente los miembros de la comunidad, se sentirán confiados en el progreso que se está logrando.