Podcast: Reproducir en una ventana nueva | Descargar

Captura de pantalla 2013-04-07 a las 9.14.53 PM

por David DuBois

Una de las frustraciones más comunes que he escuchado expresadas por personas en funciones de práctica y defensa dentro de nuestro campo es que las medidas utilizadas en las evaluaciones de programas no parecen la tarea de captar los beneficios que la tutoría de alta calidad puede ofrecer a los jóvenes. Es tentador para nosotros, como investigadores, descartar tales sentimientos como simplemente reflejar una falta de comprensión completa de las formas en que los métodos de evaluación rigurosos (por ejemplo, medir los beneficios no simplemente como cambios observados para los participantes de la intervención, sino más bien la medida en que estos superan a los que son evidentes para los no participantes) a menudo pueden revelar que las intervenciones tienen un impacto considerablemente menor de lo que la anécdota o la experiencia podrían sugerir. Sin embargo, en mi opinión, hacerlo sería un error. Una serie de consideraciones me llevan a sostener esta opinión. Por ejemplo, no se puede reclamar ninguna evaluación con confianza para hacer un balance de toda la gama de resultados que pueden fortalecerse con la participación de un joven en un programa de mentores. Tampoco se puede suponer que los resultados que recibieron atención se midieron con suficiente precisión o en los puntos más críticos del tiempo necesarios para medir con precisión los beneficios del programa. La lista podría continuar. Pero, para los propósitos actuales, me centraré solo en una consideración adicional: el potencial de la tutoría para beneficiar a los jóvenes individuales de diferentes (y posiblemente también múltiples) maneras. Este es un axioma que pocos profesionales experimentados debatirían. De hecho, son las observaciones que se han escuchado de manera oficiosa a lo largo de los años las que me han impulsado a buscar formas de ir más allá de los métodos tradicionales de evaluación para lograr una mayor sensibilidad a los beneficios variados y multifacéticos que pueden obtenerse para cualquier joven en respuesta a la orientación. En los enfoques convencionales de evaluación, el enfoque se centra en los cambios promedio que muestras enteras (o subgrupos) de jóvenes exhiben sobre los resultados, y cada resultado tiende a considerarse por separado de los demás. Si los jóvenes tutelados tienden a beneficiarse en al menos un área, por ejemplo, pero esta área difiere bastante de un joven a otro, es posible que los efectos del programa no se revelen con estos métodos tradicionales. Tampoco se puede aclarar hasta qué punto los mismos jóvenes están mostrando logros en múltiples áreas.

Mi primera incursión en metodologías alternativas para evaluar los efectos del programa fue en una revisión metanalítica de las evaluaciones del programa de mentores juveniles realizadas con Jean Rhodes y colegas (DuBois, Portillo, Rhodes, Silverthorn, & Valentine, 2011). Como es típico en tales revisiones, reportamos los efectos promedio (en todas las evaluaciones) que los programas tuvieron en los resultados en cada uno de los varios dominios (por ejemplo, académicos, salud mental, participación en problemas de conducta). Sin embargo, también analizamos si los jóvenes que participaron en un programa determinado mostraron evidencia de un cambio favorable en múltiples dominios de resultados (por ejemplo, calificaciones mejoradas y menor participación en el comportamiento delictivo). Este patrón fue evidente para los jóvenes del programa en aproximadamente la mitad (52%) de las muestras de evaluación. Es una realidad que los programas de tutoría pueden ofrecer beneficios en áreas específicas que no son tan pronunciadas como las proporcionadas por programas con un enfoque más exclusivo de esas áreas (por ejemplo, tutoría para el logro académico; prevención del abuso de sustancias para la reducción de problemas de comportamiento). Sin embargo, si el objetivo es fortalecer los resultados de manera más integral en múltiples dominios del desarrollo y ajuste de los jóvenes, nuestros hallazgos sugieren que la tutoría todavía puede ser un modo preferido de intervención

Lo que los hallazgos anteriores no abordan es si determinados jóvenes tienden a experimentar ganancias en múltiples áreas de resultados en asociación con la tutoría. Tampoco ayudan a entender si es más probable que los jóvenes con tutoría muestren ganancias en al menos un área que los jóvenes sin tutoría, aunque con diferencias entre los jóvenes en lo que podría ser esa área. Estos temas se pudieron abordar en una evaluación reciente de los efectos de los programas de mentores en jóvenes de mayor riesgo en los que colaboré con Carla Herrera y Jean Grossman (Herrera, DuBois, & Grossman, 2013). En esta investigación, creamos una medida que era simplemente un recuento de la cantidad de resultados (de 10 posibles) en los que un joven mostró un cambio positivo. Los hallazgos indicaron que una proporción significativamente mayor de jóvenes con tutoría, tanto en la asignación aleatoria como en las porciones cuasi experimentales de la evaluación (26 y 32 por ciento, respectivamente), mostró cambios en al menos una medida de resultados que los jóvenes sin tutoría (20 por ciento). Los jóvenes tutelados también tenían muchas más probabilidades de mostrar mejoras en múltiples resultados. Este tipo de logros multifacéticos fueron evidentes, sin embargo, solo para una minoría relativamente pequeña de jóvenes con tutoría (3 y 7 por ciento para dos grupos con tutoría, respectivamente, y 1 por ciento para los jóvenes sin tutoría). Además, la participación en el programa no pareció reducir el número de resultados en los que los jóvenes mostraron deterioro (cambio negativo, como aumento de los síntomas de depresión o disminución de las calificaciones).

Claramente, todos los hallazgos que he resumido deben considerarse preliminares. De hecho, mi esperanza es que estos esfuerzos iniciales ayuden a despertar el interés en el uso de métodos de evaluación con propósitos similares y, por lo tanto, se sumen a nuestro conocimiento de las formas en que la vida y el futuro de los jóvenes pueden moldearse mediante la tutoría. Mantenerse al día con las prioridades y los conocimientos que surgen de la práctica es un desafío continuo, pero cuando se acepta puede ayudar a sacar lo mejor de nosotros como investigadores. Sin embargo, como se espera que ilustre el presente ejemplo, en algunos casos, ¡incluso un poco de conteo simple puede ser de gran ayuda!DuBois, D. L., Portillo, N., Rhodes, J. E., Silverthorn, N., & Valentine, J.C. (2011). ¿Cuán eficaces son los programas de tutoría para jóvenes? Una evaluación sistemática de las pruebas. Psychological Science in the Public Interest, 12, 57-91. Disponible en http://www.psychologicalscience.org/index.php/publications/journals/pspi/mentoring.html

Herrera, C., DuBois, D. L., & Grossman, J. B. (2013). The role of risk: Mentoring experiences and outcomes for youth with varying risk profiles. New York, NY: A Public / Private Ventures project published by MDRC. Recuperado de http://www.mdrc.org/role-risk