Invertir en evaluación de programas y medición de impacto

Si vive en la ciudad de Nueva York, es probable que haya conocido a alguien que haya participado en un programa del Fresh Air Fund. Hoy en día, los ex alumnos de Fresh Air están en todas partes y, a menudo, están ansiosos por compartir su experiencia y reflexionar sobre cómo el Fondo ha dado forma a sus vidas.  

A partir de 2017, The Fresh Air Fund se comprometió a respaldar estas poderosas historias personales con una evaluación formal del programa y una medición del impacto. El Fondo contrató a Anne-Klazien (Anna) Morrison para encabezar la iniciativa y liderar el nuevo equipo de Investigación y Evaluación (I+E). 

“Con una organización que ha estado sirviendo a los niños de la ciudad de Nueva York durante tantos años como The Fresh Air Fund”, dice Anna, “existen oportunidades reales para dar un paso atrás y aprender qué está funcionando bien y qué es necesario modificar o mejorar. Queremos asegurarnos de que tomamos decisiones teniendo en mente una imagen más completa”.

El equipo de I+E tiene como objetivo tres resultados que son fundamentales para la misión del Fondo: comunidades atendidas, calidad del programa e impacto del programa. 

Los niños son elegibles para participar en los programas de verano de The Fresh Air Fund si viven en la ciudad de Nueva York, asisten a escuelas de la ciudad y cumplen con las pautas de ingresos y los requisitos de edad. El equipo de extensión comunitaria del Fondo trabaja con las familias para identificar los programas particulares del Fondo que son el mejor ajuste para sus hijos.

"Reconocemos que algunas comunidades de la ciudad de Nueva York carecen desproporcionadamente de recursos y crecer en esas comunidades puede estar asociado con un mayor riesgo para el bienestar infantil", dice Anna. "Hemos sido especialmente sensibles al éxito del Fondo en llegar a los niños de estas comunidades".

El equipo de R&E utiliza la metodología de clasificación de la Comité de Ciudadanos para los Niños de Nueva York (CCC), que sintetiza datos sobre seguridad económica, salud, vivienda y educación en la ciudad de Nueva York para identificar comunidades con niños en mayor riesgo, que viven en vecindarios con bajas tasas de graduación de la escuela secundaria, pobreza concentrada y otros factores de riesgo. Aproximadamente un tercio de los participantes del Fresh Air Fund provienen de estas comunidades de Nueva York de “mayor riesgo”, dice Anna.

Fresh Air Fund sigue a cada niño, desde la solicitud inicial, pasando por la experiencia de verano, hasta el seguimiento posterior al verano, para evaluar la calidad del programa y comprender los primeros indicadores del impacto del programa. El Fondo también recopila la misma información de padres, voluntarios y personal para obtener una imagen más completa.

"Encuestamos a los niños con encuestas anónimas, divertidas y fáciles de usar que les preguntan qué está funcionando bien y qué necesita mejorar", explicó Anna. Los jóvenes también informan sobre las habilidades que desarrollaron a través de su experiencia. Estas habilidades van desde subir de nivel en natación o obtener una certificación en RCP hasta ganar la confianza para hablar en grupo. Una de las habilidades más comúnmente reportadas, señala Anna, es “hacer nuevos amigos”.

Encuestas como estas, combinadas con datos de solicitudes y participación, discusiones de grupos focales y nuevas asociaciones con expertos en investigación externos, han ayudado a The Fresh Air Fund a forjar un camino a seguir basado en evidencia y en mejores prácticas.  

Este camino ya ha revelado oportunidades para agudizar el impacto del Fondo. Algunas oportunidades son sencillas, como simplificar el proceso de solicitud para padres y tutores y proporcionar los libros que los jóvenes desean en las bibliotecas del campamento. Otras oportunidades son más estratégicas, como observar más de cerca la programación centrada en los adolescentes e identificar formas de apoyar mejor a las nuevas familias anfitrionas y a los niños de Fresh Air que las visitan. 

“Tan pronto como termina el verano, mis colegas vienen a verme emocionados de ver los nuevos datos. Ya están empezando a planificar el verano siguiente y están muy ansiosos por obtener esa información”.

En última instancia, dice Anna, el mejor indicador de la calidad del programa es que muchos niños regresan para pasar otro verano o se inscriben en los programas del año escolar del Fondo. "La gente vota con los pies", dice Anna. “Muchos de los líderes y el personal de nuestro campamento eran jóvenes participantes del Fresh Air Fund”.

El verano pasado, 82 miembros del personal del campamento fueron ex alumnos. de los programas Fresh Air y tres de los seis directores de campamentos actuales también son exalumnos. 

El personal de Fresh Air Fund trabaja para garantizar que los programas del Fondo creen oportunidades para que los jóvenes participantes amplíen sus perspectivas, asuman desafíos y aprendan habilidades para la vida, obtengan nuevas amistades y relaciones de tutoría, y reflexionen sobre metas personales, todo en un ambiente seguro y divertido. Los padres y tutores informan periódicamente que los programas del Fondo tienen efectos positivos importantes en sus hijos, desde una mayor confianza hasta un comportamiento positivo para establecer metas, especialmente cuando los niños participan en estos programas durante varios años. 

De cara al futuro, un área prioritaria para The Fresh Air Fund es comprender mejor cómo la participación (especialmente la participación repetida) da forma a los resultados a largo plazo, como el éxito en la escuela. Anna señala que los científicos sociales están descubriendo que una base socioemocional sólida, que los programas Fresh Air Fund buscan fomentar, es un ingrediente fundamental para las actitudes positivas hacia la escuela y el aprendizaje.

Un estudio piloto de 2018, realizado por profesores de la Escuela Steinhardt de la Universidad de Nueva York, encontró que los graduados del programa de tres años de The Fresh Air Fund Programa de concientización profesional (CAP) tenían mayor asistencia a la escuela y tasas más altas de graduación a tiempo de la escuela secundaria que sus compañeros de escuelas no participantes. El plan de estudios del CAP busca apoyar el desarrollo del “21^calle Century Skills”, como el pensamiento crítico, la colaboración y el liderazgo.  

“En la ciudad de Nueva York”, dice Anna, “en los últimos años se ha hecho un esfuerzo por ofrecer más programas de verano vinculados a las escuelas de los niños. Creo que este es un avance positivo, particularmente en el sentido de que simplifica la planificación para padres y tutores y brinda a los niños más opciones de verano. Sin embargo, esto a menudo significa que los niños pasan el verano en el mismo lugar con los mismos compañeros que pasarían todo el tiempo y en las mismas comunidades. Los programas del Fresh Air Fund permiten la exposición a nuevos lugares, nuevas personas y nuevas experiencias. La gran mayoría de nuestros participantes primerizos nunca han salido de la ciudad de Nueva York sin su familia. Esta es una verdadera aventura que puede iniciar un viaje que impactará el resto de sus vidas”.

Aprende más sobre los programas de The Fresh Air Fund y cómo están ayudando a los niños de las comunidades de bajos ingresos de la ciudad de Nueva York.