INTRODUCCIÓN

Un diseño es un plan de acción para los pasos a realizar en la evaluación para identificar cambios en el sistema evaluado. La evaluación puede especificar tres escenarios que determinan qué tipo de diseño usar. Los dos primeros se basan en el supuesto de que los grupos son comparables. La tercera es una alternativa cuando la comparación de grupos es imposible:

PRIMER ESCENARIO: estudios controlados aleatorios. Estos son diseños que se ejecutan cuando tienes control total sobre el lanzamiento del programa y sobre los participantes. Esto incluye el control sobre los tiempos de finalización del programa, la selección de participantes, la asignación a diferentes versiones o modalidades del programa, los recursos utilizados por ellos, etc. En este caso, el diseño es típico para el campo de la investigación experimental.

SEGUNDO ESCENARIO: diseños de grupo no aleatorizados. Si no es posible tener un control completo sobre el programa o los participantes, se debe abandonar el control sobre los diseños anteriores. Estas son situaciones en las que puede desarrollar planes de evaluación que son similares en forma y organización a los mencionados anteriormente. Sin embargo, como no existe un control completo, los resultados deben considerarse con precaución. En otras palabras, aunque el diseño es como el primer escenario, la incapacidad de controlar todos los aspectos del proceso amenaza la validez de los resultados. Por esta razón, los resultados mencionados deben evaluarse de manera bastante crítica y deben encontrarse formas complementarias para lograr resultados confiables.

TERCER ESCENARIO: estudios de coherencia. Es un escenario en el que no hay garantía de que haya control sobre los diversos y significativos elementos. Estos estudios buscan específicamente alternativas que sean independientes de la comparación de medidas entre 2 o más grupos.

Estos tres escenarios se pueden organizar utilizando dos enfoques básicos:

DISEÑOS CONTRAFÁCTICOS: consisten en diseños que usan grupos de hechos. Un grupo factual o contrafactual es el grupo que no utiliza el programa, pero en características coincide exactamente con el grupo al que se aplica. Dentro de estos diseños, los estudios controlados por repetición son más efectivos. En la aplicación diferenciada, las partes también pueden organizarse como diseños de grupos no aleatorios, aunque son menos significativas.

DISEÑOS NO CONTRAFACTUALES: son aquellos en los que no puede confiar en hechos relacionados con el grupo y, por lo tanto, no es posible la comparación entre grupos. Este tipo de diseño incluye diseños de coherencia.

ATRIBUCIÓN CAUSAL

Uno de los elementos básicos del diseño es obtener la atribución causal del programa. Para obtener más información, lea el siguiente documento: https://www.unicef-irc.org/publications/751-overview-strategies-for-causal-attribution-methodological-briefs-impact-evaluation.html

«  ¡Ejercicio!

1. Se lleva a cabo un programa para controlar la agresividad en un centro de detención con resultados aceptables. Sin embargo, se decidió iniciar otro programa basado en la atención mutua. Para verificar la efectividad de este nuevo programa en comparación con el otro, se seleccionó un grupo de participantes según corresponda. Indique qué diseño de evaluación puede usarse y justifique su respuesta.
2. Un maestro de inglés usa un método novedoso basado en trabajar con maestros de otras materias. Por ejemplo, con el profesor de economía y estudios sociales, desarrollan el presupuesto de una empresa ficticia en inglés. Imagine que tiene que registrarse con el grupo de estudiantes para recopilar datos relevantes. El curso dura un semestre completo y necesita el permiso de la administración de la escuela, los maestros y los estudiantes participantes. Con base en esta información, haga una propuesta de diseño para la evaluación que tenga en cuenta que se puede contactar a más de un estudiante para recopilar los datos. Justifica tu sugerencia brevemente.
3. Imagine que está trabajando en el centro de inmigración tratando de adaptar su procedimiento de trabajo a las regulaciones aprobadas recientemente. Su percepción es que la introducción de este esquema resultará en un deterioro de la atención de los usuarios. Además, el tiempo de procesamiento parece haber aumentado considerablemente hasta la validación de la documentación del usuario. Asimismo, el número de usuarios por trabajador social ha aumentado en un promedio de 3 personas. En vista de esta situación, indique qué diseño de evaluación podría usar para respaldar de facto esta situación y justifique su propuesta.

This work is licensed under a Creative Commons Attribution-ShareAlike 4.0 International License

The European Commission support for the production of this publication does not constitute an endorsement of the contents which reflects the views only of the authors, and the Commission cannot be held responsible for any use which may be made of the information contained therein.