TIMpact 365 – notre nouvelle stratégie de mesure
Nous abordons la démarche de mesure de manière globale, en analysant non seulement les résultats et l’impact de nos programmes, mais également la manière dont nous les offrons, dans une optique de qualité. Cette stratégie transcende tout modèle d’exploitation ou de prestation, ce qui signifie que nous mesurons les mêmes éléments, à la fois dans nos programmes scolaires et nos programmes offerts tout au long de l’année. Ensemble, ces données nous permettent de mieux comprendre ce que nous faisons et l’impact que nous avons sur les jeunes de nos communautés.
Le logo TIMpact365 rend hommage à nos sites de plein air au Canada et aux États-Unis, fait référence aux nombreuses années que les jeunes passent dans notre programme d’été et communique notre engagement à servir les jeunes, à mesurer notre impact et à améliorer nos programmes, tout au long des 365 jours de l’année.
Au cœur de TIMpact365 se trouve notre engagement en faveur de la qualité et de l’amélioration continue de la qualité, des résultats et de l’impact de nos programmes. Une gamme d’icônes a été conçue pour nous aider à communiquer le cadre de nos initiatives.
Données qualitatives
Données quantitatives
Nous recueillons un mélange de données qualitatives (observations de programmes internes et externes, entrevues, groupes de discussion) et quantitatives (résultats de sondages) qui fournissent des informations exploratoires et un contexte utile pour créer des descriptions convaincantes de nos programmes.
Nous suivons l’évolution et les changements de chaque résultat au moyen de sondages « avant-après » et utilisons la recherche secondaire comme point de référence comparatif pour évaluer approximativement ce qui se serait passé autrement pour chaque jeune en comparant son expérience et ses résultats à ceux de jeunes similaires qui n’ont pas participé à nos programmes. Nous utilisons des cadres et des outils de pointe pour nous aider à comprendre comment nos programmes sont exécutés, identifier en permanence les domaines à améliorer et offrir une expérience de qualité supérieure à tous les jeunes. Nos efforts de mesure sont exhaustifs, car nous consultons les campeurs, le Conseil consultatif des jeunes, les anciens campeurs et le personnel afin de comprendre pleinement l’expérience du camp.
Nous croyons fermement que la mesure est continue. Nous ne nous contentons pas de mesurer une seule fois; nous le faisons plusieurs fois, en suivant un cycle. Grâce à des mesures continues, nous identifions ce que nous faisons de bien, déterminons où nous pouvons nous améliorer et mettons en œuvre des changements clés dans nos programmes et la formation du personnel.
Mesure de la qualité du programme
La qualité des programmes est essentielle pour comprendre comment les programmes des Camps Tim sont offerts à nos jeunes. À l’instar de nombreux autres contextes éducatifs et programmes parascolaires, les domaines du développement positif des jeunes et des camps accordent la priorité à la qualité des programmes afin de s’assurer que chaque jeune ait une expérience de qualité au camp. En participant à des programmes de qualité proposés dans des environnements privilégiés, les jeunes obtiennent des résultats plus positifs qui sont associés au bien-être et à l’épanouissement à l’âge adulte. Nous cherchons à mesurer la qualité de prestation de tous nos programmes et utilisons les données de qualité des programmes pour définir les changements et les améliorations à y apporter.
La qualité des programmes fait référence à la façon dont les programmes sont proposés au camp grâce à des pratiques du personnel qui créent quatre environnements. Le David P. Weikart Center for Youth Program Quality (qui fait partie du Forum for Youth Investment) présente ces environnements sous la forme d’une pyramide, semblable à la hiérarchie des besoins de Maslow. Les niveaux inférieurs de la pyramide doivent être satisfaits (c’est-à-dire que les environnements doivent être créés) avant que les niveaux supérieurs de la pyramide puissent être atteints. Les normes de santé et de sécurité sont abordées dans les modèles d’agrément et, par conséquent, la qualité des programmes se concentre principalement sur les aspects socioémotionnels du programme.
Les quatre environnements sont :
Copyright 2021 The Forum for Youth Investment
- Sécuritaire : Le programme est un environnement sécuritaire pour les jeunes sur le plan psychologique et émotionnel. L’environnement est exempt de préjugés et le personnel cherche activement à inclure tous les jeunes et à créer un espace où chaque jeune se sent à sa place et où les personnes ayant des identités différentes sont valorisées.
- Soutenant : Le personnel crée un environnement d’apprentissage dans lequel les jeunes sont incités à essayer différentes choses, à développer de nouvelles compétences et à comprendre et gérer leurs émotions et leurs interactions sociales.
- Interactif : L’environnement est riche en possibilités pour que les jeunes travaillent ensemble pour atteindre des objectifs, réussir de manière indépendante et comprendre les forces, les domaines d’amélioration, les perspectives individuelles et les expériences des autres.
- Engageant : Les participants au programme sont encouragés à s’investir plus profondément dans l’apprentissage et le transfert d’apprentissage au-delà du programme. Ils sont également soutenus dans la prise en charge, l’appropriation et l’initiative de leur apprentissage par l’intermédiaire de la planification et de la fixation d’objectifs.
Aux Camps Tim, nous avons commencé à évaluer la qualité des programmes grâce à notre participation à la Camp Program Quality Initiative (CPQI) de l’American Camp Association. Il s’agissait d’un programme pilote pour comprendre et développer des systèmes durables de qualité des programmes dans l’environnement du camp. Nous avons été honorés d’avoir été sélectionnés pour participer au projet pilote du CPQI.
Grâce à notre participation au CPQI et à notre évaluation initiale, nous avons réalisé la nécessité d’accorder la priorité à la qualité des programmes dans tout ce que nous faisons et avons lancé un cycle d’amélioration continue à grande échelle axé sur l’évaluation de la qualité des programmes. Nous utilisons un outil de mesure validé par la recherche pour les évaluations internes et externes, sollicitant la participation de plusieurs parties prenantes dans le processus d’évaluation (le personnel de l’organisation, les campeurs, les membres du Conseil consultatif des jeunes, les partenaires scolaires), et créant des façons nouvelles et uniques de comprendre la qualité des programmes du point de vue des jeunes. Nous utilisons des données sur la qualité des programmes pour examiner nos programmes et apporter des changements afin de mieux servir les jeunes.
Cette approche de qualité des programmes est utilisée par 140 réseaux et plus de 4 800 programmes(1), y compris BGC Canada. En utilisant un cadre commun fondé sur des données probantes, nous sommes en mesure de comprendre, de discuter et de comparer la qualité dans les mêmes termes que d’autres organisations nationales et internationales au service de la jeunesse.
Pour en savoir plus sur la Camp Program Quality Initiative (CPQI) de l’American Camp Association (en anglais seulement) et pour découvrir ce que nous avons appris de nos évaluations de la qualité de nos programmes, cliquez ici.
Mesure des résultats
Nos programmes sont intentionnellement conçus pour favoriser le développement positif chez nos campeurs. Nous savons qu’il est important de mesurer leur développement à l’aide d’un cadre de mesure du développement bien établi. L’un des cadres les plus couramment utilisés est celui des 5C. Les 5C sont les suivants :
Compétences : Les jeunes développent des compétences techniques, sociales et émotionnelles transférables.
Confiance : Les jeunes développent un sentiment d’estime de soi et de maîtrise des habiletés.
Caractère : Les jeunes prennent des responsabilités et développent leur indépendance et leur individualité.
Compassion : Les jeunes font preuve d’empathie et de sympathie envers les autres et comprennent qu’il est important de prendre soin des gens qui les entourent.
Connexion : Les jeunes tissent des relations positives et nourrissent des interactions positives.
Pour en apprendre davantage au sujet du modèle des 5C du développement positif chez les jeunes, y compris son fondement théorique, des définitions supplémentaires et des références scientifiques, cliquez ici (en anglais seulement).
Chez les jeunes, le développement des 5C est associé à un plus grand bien-être, à une diminution des comportements à risque, à une contribution à la communauté et à une plus grande réussite dans d’autres contextes de la vie.(2)
Deux fois par année, nous demandons aux participants à nos camps d’été de répondre à des questions au sujet des 5C (les questions sont celles du formulaire abrégé du modèle de développement positif chez les jeunes, validé par la recherche, à l’intention des praticiens). Dans le cadre de ce sondage réalisé après leur séjour au camp, les jeunes bénéficiant de programmes mis en œuvre pendant l’année scolaire doivent réfléchir à l’impact du camp sur leur développement des 5C. Ces informations nous sont utiles, car elles nous permettent de comprendre comment nos programmes contribuent au développement global des campeurs. En outre, comme les 5C sont mesurés dans d’autres programmes de développement de la jeunesse, cela signifie que nous pouvons identifier les résultats que les jeunes obtiennent dans nos programmes par rapport à d’autres programmes. Pour en savoir plus sur ce que nous avons découvert jusqu’à ce jour, cliquez ici.
En outre, nous nous intéressons à 18 autres résultats, dont l’indépendance, le leadership, l’appréciation de la diversité, la responsabilité, le travail d’équipe, la volonté d’essayer de nouvelles choses, la présence, et bien d’autres encore. Il est important de déterminer l’intérêt que portent les jeunes à l’apprentissage de chacun des résultats, ainsi que l’apprentissage réel qu’ils ont déclaré avoir acquis, afin de personnaliser notre programmation en fonction des besoins des jeunes.
Mesure de l’impact
Nos programmes ont un impact à court et à long terme sur les jeunes. Les jeunes ressentent des changements immédiats après leur participation aux programmes, mais ils appliquent également les connaissances acquises dans le cadre du camp dans d’autres contextes de vie, ce qui produit un impact à long terme.
Impact à court terme :
Lorsque les jeunes développent les 5C, ils progressent également en contribuant à leur propre développement, à celui de leur communauté et à leur avenir.(2) C’est ce que nous appelons les « Indispensables », et ceux-ci sont renforcés dans la programmation de nos camps au moyen d’activités spécifiques visant à favoriser leur développement.
Le Soi : Les jeunes développent une meilleure perception d’eux-mêmes, se fixent des objectifs et apprennent à les modifier si nécessaire.
La Communauté : Les jeunes comprennent l’importance de la communauté et contribuent de manière positive à la communauté et au bien-être des autres.
L’Avenir : Les jeunes envisagent leur avenir avec un sentiment d’espoir et d’optimisme face à ce qu’ils réaliseront.
Nous demandons aux jeunes de répondre à des questions de mesure d’impact avant et après leur séjour au camp d’été afin de comprendre l’impact de nos programmes sur eux. Les questions du sondage comprennent des mesures validées par la recherche concernant le Soi (autorégulation intentionnelle)(3), la Communauté (comportements prosociaux)(4), et l’Avenir (attentes optimistes face à l’avenir).(5) Les participants aux programmes offerts tout au long de l’année font part de leur évolution dans ces domaines dans le cadre d’un sondage réalisé après leur séjour au camp.
Pour découvrir ce que nous avons appris de la mesure de l’impact, cliquez ici.
Pour toute question relative à notre impact et à sa mesure, communiquez avec nous à l’adresse suivante : research@timscamps.com.
Références
- The Forum for Youth Investment. (n.d.). David P. Weikart Center for Youth Program Quality. https://forumfyi.org/weikartcenter/
- Schmid, K. L., Phelps, E., & Lerner, R. M. (2011). Constructing positive futures: Modeling the relationship between adolescents’ hopeful future expectations and intentional self-regulation in predicting positive youth development. Journal of Adolescence, 34(6), 1127–1135.
- Freund, A. M. & Baltes, P. B. (2002). Life-management strategies of selection, optimization, and compensation: Measurement by self-report and construct validity. Journal of Personality and Social Psychology, 82(4), 642-662. https://doi.org/10.1037//0022-3514.82.4.642
- Luengo Kanacri, B. P., Eisenberg, N., Tramontano, C., Zuffiano, A., Caprara, M. G., Regner, E., Zhu, L., Pastorelli, C., & Caprara G. V. (2021). Measuring prosocial behaviors: Psychometric properties and cross-national validation of the prosociality scale in five countries, Frontiers in Psychology, 12, 1-13. https://doi.org/10.3389/fpsyg.2021.693174
- Schmid Callina, K., Johnson, S. K., Buckingham, M. H., & Lerner, R. M. (2014). Hope in context: Developmental profiles of trust, hopeful future expectations, and civic engagement across adolescence. Journal of Youth and Adolescence. https://doi.org/10.1007/s10964-014-0096-9