Blogue

Arrêtez. Évaluez et écoutez : une discussion avec l’équipe d’évaluation de Mitacs

Si vous participez au programme Mitacs, vous avez probablement été exposé à un outil d’évaluation comme un sondage ou un rapport final. Mais vous pourriez être surpris d’apprendre que nous avons un département dédié à comprendre et évaluer vos réponses, et à aider à orienter la gestion de nos programmes. Pour en savoir plus sur l’équipe d’évaluation et leur travail, nous avons parlé avec Jackie Hallet, agente d’évaluation.

Commençons par les bases : dans un contexte d’affaires, qu’est-ce que l’évaluation exactement?
En ce qui concerne les définitions des manuels scolaires, c’est l’investigation systématique du mérite d’une intervention. Dans le cas de Mitacs, cette intervention est un programme — plus précisément, tous nos programmes. L’évaluation de programme est une forme de recherche sociale appliquée chargée d’éclairer la prise de décision.

Chez Mitacs, notre équipe d’évaluation se concentre principalement sur la mesure de la performance des programmes, c’est-à-dire sur la performance des programmes par rapport aux résultats visés.

Pourquoi une organisation comme Mitacs a-t-elle besoin d’une équipe d’évaluation et d’une stratégie d’évaluation?
Nos programmes sont conçus pour apporter des changements positifs au paysage canadien de l’innovation, donc nous devons être capables de mesurer et de décrire les changements résultant de la participation à nos programmes.

Une équipe d’évaluation et une stratégie d’évaluation surveillent la performance de nos programmes, veillent à ce que la prestation des programmes demeure efficace et efficiente, et capturent les résultats immédiats, intermédiaires et à long terme de nos programmes.

Quels sont les outils courants utilisés par l’équipe d’évaluation?
Actuellement, notre outil le plus courant pour recueillir la satisfaction et les résultats des participants aux programmes est le sondage humble.

Pour les résultats immédiats et intermédiaires, nous sondons les participants environ trois mois après la fin de leurs projets individuels. Pour les résultats à long terme, nous avons un cycle d’enquêtes longitudinales, qui sont distribuées à des groupes d’anciens participants tous les trois ans.

Les anciens stagiaires sont mes participants préférés parmi eux; c’est tellement inspirant de voir où ils en sont puisqu’ils ont participé à un programme Mitacs. Certains lancent leur propre entreprise, d’autres sont embauchés par leur organisation partenaire... Quoi qu’il en soit, presque tous disent que leurs perspectives de carrière se sont améliorées après leur stage. C’est ce que j’aime entendre — surtout dans une économie difficile!

Pourquoi des sondages comme ceux mentionnés ci-dessus sont-ils les meilleurs outils à utiliser? Quels autres outils sont généralement utilisés en évaluation?
Les sondages sont utiles pour recueillir des données provenant d’une grande variété (et d’un grand nombre) de participants. Ils sont peu coûteux, efficaces, opportuns et standardisés pour réduire les biais. D’autres méthodes courantes de collecte de données incluent les groupes de discussion, les études de cas et les entrevues avec des informateurs clés. Ce sont des entrevues qualitatives et approfondies avec entre 15 et 35 personnes sélectionnées pour leur connaissance directe d’un sujet particulier.

En fait, l’équipe d’évaluation mènera bientôt des entrevues avec des informateurs clés avec d’anciens participants. Bien que les sondages soient excellents pour recueillir beaucoup de données, parfois les informations obtenues nécessitent une exploration plus approfondie.

Dans notre prochaine étude, nous mènerons des entrevues individuelles avec un groupe restreint d’anciens Accélération des stagiaires pour déterminer quel impact le programme a eu, le cas échéant, sur leur décision de poursuivre l’entrepreneuriat. D’après les données des enquêtes longitudinales, nous savons que 14% des anciens Accélération Les stagiaires s’engagent dans l’entrepreneuriat, et c’est un domaine d’intérêt croissant pour Mitacs et les universités canadiennes. Nous voulons donc savoir comment nous pouvons le mieux soutenir les entrepreneurs au Canada.

Merci d’avoir pris le temps de nous aider à en apprendre davantage. Pour conclure, avez-vous des conseils pour les personnes ou organisations souhaitant mettre en place leurs propres stratégies de mesure de performance?
Les modèles logiques et les stratégies de mesure de la performance devraient être développés dès la naissance d’un programme. Un modèle logique est un excellent outil pour fournir une vue d’ensemble visuelle des principaux composants d’un programme, de ses effets attendus, et
les liens causaux théoriques entre le programme et ses objectifs.

Tout cela pour dire que la mesure de la performance et l’évaluation de programme ne devraient pas se faire à mi-chemin ou à la fin d’un programme — si vous mettez en place un cadre de mesure de performance dès le tout début, évaluer les résultats sera un jeu d’enfant.


Lisez certains travaux de l’équipe d’évaluation de Mitacs :

L’équipe de Mitacs
L’équipe de Mitacs

Le contenu du site Web de Mitacs est créé par des membres de l’ensemble de l’organisme, animé·es par la même passion pour l’innovation et le désir de partager leurs points de vue au sein de l’écosystème de l’innovation.