Aumento de conocimientos/habilidades

Salida

Número o porcentaje de [especificar el grupo destinatario] con mayores conocimientos y/o habilidades en [especificar el tema].

Este indicador mide en qué medida los participantes en el proyecto (por ejemplo, actores de la sociedad civil, representantes gubernamentales, estudiantes y otras partes interesadas) han adquirido conocimientos o habilidades como resultado de las actividades de aprendizaje y transferencia de habilidades apoyadas por el proyecto, tales como formación, talleres, demostraciones, tutorías, sesiones de sensibilización u otras actividades de fortalecimiento de capacidades. Se centra en si los participantes han mejorado su comprensión y/o capacidad práctica en un área temática específica o áreas específicas a las que se dirige la intervención.

Determine el valor del indicador utilizando la siguiente metodología:

 

1)Defina las áreas clave de conocimientos y/o habilidades que el proyecto pretende fortalecer. Estas deben corresponder a los objetivos de aprendizaje de la intervención y estar claramente definidas antes de la recopilación de datos. Asegúrese de que el equipo aplique de manera coherente la distinción entre conocimientos (mejor comprensión o conciencia de conceptos, políticas o procedimientos) y habilidades (la capacidad de aplicar estos conocimientos de manera eficaz).

2)Diseñe un enfoque de medición adecuado teniendo en cuenta su público objetivo para evaluar los cambios en los conocimientos y/o habilidades. Para ello, normalmente es necesario medir la diferencia entre la situación inicial (antes de la intervención) y la situación posterior a la intervención (después de la intervención). Las opciones más comunes son:

• Prueba estandarizada de conocimientos y/o habilidades: Administrar la misma prueba o una equivalente antes y después de la intervención y comparar las puntuaciones de cada participante.

• Autoevaluación: Pida a los participantes que califiquen su nivel de conocimientos y/o habilidades relacionados con cada una de las áreas evaluadas antes y después de la intervención utilizando una escala estándar (por ejemplo, 1 = muy bajo, 5 = muy alto).

• Observación o evaluación del rendimiento práctico: Observe directamente a los participantes mientras realizan tareas relevantes o demuestran sus habilidades en entornos reales o simulados y registre su rendimiento utilizando un formulario de observación estructurado.

Si el indicador incluye habilidades, se debe utilizar al menos un método que refleje su aplicación en la práctica. Puede tratarse de observación directa, tareas prácticas o indicadores basados en pruebas que evalúen el trabajo realizado (por ejemplo, evaluación de los resultados del trabajo utilizando criterios de calidad predefinidos, evaluación estructurada del rendimiento de las tareas por parte de un formador o mentor basada en la aplicación observada, o simulaciones basadas en tareas puntuadas según criterios claros).

3)Establecer un umbral mínimo de mejora que defina «aumento de conocimientos y/o habilidades». Ejemplos:

• Una mejora porcentual mínima entre las puntuaciones previas y posteriores a la prueba (por ejemplo, un aumento de al menos el 20 %).

• Un cambio de al menos un punto hacia arriba en una escala de autoevaluación de 5 puntos.

• Mejora verificada en el rendimiento de las tareas según criterios establecidos.

Evite establecer requisitos poco realistas, ya sean excesivamente altos o innecesariamente bajos, verificando la dificultad del método de evaluación mediantepruebas previascon al menos 10 personas.

4)Recopilar los datos previos a la intervención, ya sea de toda la población objetivo o de una muestra representativa, según corresponda.

5)Recopile datos posteriores a la intervención. Repita la recopilación de datos, idealmente inmediatamente después de la intervención y, si es posible, de nuevo en una fase posterior para evaluar la retención. Asegúrese de que los encuestados hayan tenido tiempo suficiente para interiorizar o aplicar lo que han aprendido. Se debe evaluar a las mismas personas en todos los puntos de medición para permitir la comparación a nivel individual entre los resultados previos y posteriores a la intervención.

6)Evaluar los resultados a nivel de los participantes. Calcular cuántos participantes alcanzaron el umbral mínimo requerido para aumentar los conocimientos y/o habilidades definidos en el paso 3.

7) Para calcular el valor del indicador, divida el número de participantes que cumplen el umbral definido de aumento de conocimientos/habilidades entre el número total de participantes evaluados. Multiplique el resultado por 100 para convertirlo en un porcentaje.

Los datos pueden desglosados por género, grupo de edad, área geográfica y/u otras características relevantes (por ejemplo, tipo de formación o tema, organizaciones destinatarias), dependiendo del contexto y enfoque de su proyecto.

1) Cuando se realice una encuesta a una muestra en lugar de a toda la población objetivo, asegúrese de que sea lo suficientemente grande como para tener en cuenta el desgaste al final del estudio, ya que es posible que no todos los encuestados iniciales estén disponibles en esa etapa. Esto ayuda a garantizar que la evaluación posterior a la intervención siga siendo representativa (el tamaño de la muestra sigue siendo lo suficientemente grande) y permite recopilar datos de los mismos encuestados tanto en las mediciones iniciales como en las finales.

2) Si se pretende evaluar tanto los conocimientos como las habilidades, puede que no sea suficiente basarse únicamente en pruebas previas y posteriores. Es posible que se necesiten métodos adicionales, como la observación o la evaluación del rendimiento práctico, para medir adecuadamente el aumento de las habilidades.

3) Los pasos metodológicos anteriores recomiendanrecopilar datos tanto antes como después de la intervención para captar en qué medida los encuestados mejoraron (o no) sus conocimientos y/o habilidades. Sin embargo, cuando no sea posible recopilar datos de referencia o no sea adecuado realizar pruebas antes y después de la intervención para el grupo destinatario, se puede utilizar como alternativa un formulario de evaluación basado en el recuerdo. Dichos formularios pueden incluir preguntas contrafactuales o de referencia, por ejemplo:

• ¿En qué medida diría que el apoyo prestado por [ especificar la organización/el actor] influyó en su conocimiento sobre [ especificar el tema]?

• ¿Has adquirido habilidades y conocimientos que no tenías antes?

Se puede utilizar una puntuación compuesta a partir de varias preguntas de este tipo para definir «mayor conocimiento y/o habilidad». Este tipo de formulario de evaluación también es útil para recopilar comentarios que permitan mejorar la intervención.

Los enfoques basados en el recuerdo deben considerarse como una segunda opción y utilizarse solo cuando no sea posible recopilar datos de referencia, ya que el sesgo de recuerdo y el sesgo de deseabilidad social pueden inflar los resultados, especialmente en contextos de formación Donante. Por lo tanto, los resultados obtenidos mediante métodos basados en el recuerdo deben interpretarse como cambios percibidos, no como cambios medidos.

4) Si su proyecto tiene como objetivo medir si la población objetivo tiene un nivel específico de conocimientos y/o habilidades, en lugar de si han mejorado con el tiempo, utilice el indicador % de [especifique el grupo objetivo] con los conocimientos/habilidades deseados de [especifique el tema] . La ventaja de este enfoque es que no es necesario recopilar datos de referencia y de seguimiento de los mismos encuestados.

5) Decida si se va a medir el efecto directo de una actividad puntual (por ejemplo, una demostración) o el efecto de un proceso de aprendizaje más prolongado (por ejemplo, una serie de sesiones de formación a lo largo de un periodo de tiempo).

6)Si utiliza autoevaluaciones, valídelas con una comprobación externa para reducir el sesgo. Pida a los formadores o compañeros que comprueben si los participantes pueden demostrar los conocimientos o habilidades que ellos mismos han valorado. Este paso de verificación garantiza que los resultados reflejen el aprendizaje real y no percepciones subjetivas.

7) Si es posible,realice la «evaluación posterior» dos veces: una inmediatamente después de completar la actividad de «fortalecimiento de capacidades» (para mostrar el aprendizaje inmediato) y otra 1 o 2 meses después (para mostrar los conocimientos y/o habilidades que las personas realmente recuerdan y podrían utilizar). Sin embargo,las evaluaciones no tienen por qué estar relacionadas con una sola actividad(por ejemplo, la formación),sino quepueden realizarse durante las encuestas iniciales y finales, evaluando el cambio general en los conocimientos y/o habilidades específicos de la población objetivo.

8) Basándose en su análisis de accesibilidad y género , evalúe si se necesitan medidas adicionales para garantizar una medición justa y precisa para todos los encuestados y, cuando sea necesario, aplíquelas. Estas pueden incluir ofrecer múltiples formatos de recopilación de datos (escritos, orales o digitales) para adaptarse a diferentes capacidades; garantizar que los lugares de evaluación estén libres de barreras; permitir horarios flexibles para los participantes que lo necesiten; permitir el uso de aplicaciones o programas de asistencia; y proporcionar materiales de apoyo, como textos en letra grande o ayudas visuales. Utilice un lenguaje y ejemplos neutros en cuanto al género en todas las preguntas y desglose e interprete los resultados por género para identificar si las niñas/mujeres jóvenes, los niños/hombres jóvenes o los jóvenes no binarios experimentan diferentes resultados de aprendizaje u obstáculos.

9) Si procede, considere preguntar a los encuestados dónde adquirieron los conocimientos o habilidades. Esto podría ayudarle a comprender la contribución de su intervención.

10) Si es posible, añada preguntas para recabar opiniones sobre la utilidad y la pertinencia del fortalecimiento de la capacidad. Utilice los resultados para mejorar la intervención.

11) Para reforzar el aprendizaje y la rendición de cuentas, compartir los resultados de la evaluación con los participantes cuando sea posible y apropiado, y utilizarlos para perfeccionar futuras iniciativas de desarrollo de capacidades.