Rapport

Arrêtez. Évaluez et écoutez : une discussion avec l’équipe d’évaluation de Mitacs

Si vous participez au programme Mitacs, vous avez probablement été exposé à un outil d’évaluation comme un sondage ou un rapport final. Mais vous serez peut-être surpris d’apprendre que nous avons un département dédié à la compréhension et à l’évaluation de vos réponses, et à l’aide à éclairer la façon dont nous gérons nos programmes. Pour en savoir plus sur l’équipe d’évaluation et son travail, nous avons parlé à Jackie Hallet, agente d’évaluation.

Commençons par les bases : Dans un contexte d’entreprise, qu’est-ce que l’évaluation exactement ?
En ce qui concerne les définitions des manuels scolaires, c’est l’enquête systématique sur le bien-fondé d’une intervention. Dans le cas de Mitacs, cette intervention est un programme — plus précisément, tous nos programmes. L’évaluation de programme est une forme de recherche sociale appliquée qui est commandée pour éclairer la prise de décisions.

À Mitacs, notre équipe d’évaluation se concentre en grande partie sur la mesure du rendement des programmes ou, en d’autres termes, sur la façon dont les programmes se comportent par rapport aux résultats escomptés.

Pourquoi une organisation comme Mitacs a-t-elle besoin d’une équipe d’évaluation et d’une stratégie d’évaluation ?
Nos programmes sont conçus pour apporter des changements positifs au paysage canadien de l’innovation, nous devons donc être en mesure de mesurer et de décrire les changements qui découlent de la participation à nos programmes.

Une équipe d’évaluation et une stratégie d’évaluation surveillent le rendement de nos programmes, veillent à ce que l’exécution des programmes demeure efficiente et efficace, et rendent compte des résultats immédiats, intermédiaires et à long terme de nos programmes.

Quels sont les outils courants utilisés par l’équipe d’évaluation ?
À l’heure actuelle, notre outil le plus courant pour saisir la satisfaction et les résultats des participants au programme est l’humble sondage.

Pour les résultats immédiats et intermédiaires, nous sondons les participants au programme environ trois mois après l’achèvement de leurs projets individuels. Pour les résultats à long terme, nous avons un cycle d’enquêtes longitudinales, qui sont distribuées à des groupes d’anciens participants tous les trois ans.

Les anciens stagiaires sont mes participants préférés parmi eux ; c’est tellement inspirant de voir où ils en sont puisqu’ils ont participé à un programme de Mitacs. Certains démarrent leur propre entreprise, d’autres sont embauchés par leur organisation partenaire... quoi qu’il en soit, presque tous disent que leurs perspectives de carrière se sont améliorées après leur stage. C’est ce que j’aime entendre , surtout dans une économie difficile !

Pourquoi les enquêtes comme celles ci-dessus sont-ils les meilleurs outils à utiliser ? Quels sont les autres outils habituellement utilisés dans l’évaluation ?
Les sondages sont bons pour obtenir des données d’une grande variété (et d’un grand nombre) de participants. Ils sont peu coûteux, efficaces, opportuns et standardisés pour réduire les biais. D’autres méthodes courantes de collecte de données comprennent des groupes de discussion, des études de cas et des entrevues avec des informateurs clés. Il s’agit d’entrevues qualitatives et approfondies avec entre 15 et 35 personnes qui ont été sélectionnées pour leurs connaissances de première main sur un sujet particulier.

En fait, l’équipe d’évaluation mènera des entrevues avec d’anciens informateurs clés dans un avenir très proche. Bien que les levés soient parfaits pour capturer beaucoup de données, parfois les informations obtenues à partir des levés nécessitent une exploration plus approfondie.

Dans le cadre de notre prochaine étude, nous mènerons des entrevues en tête-à-tête avec un groupe restreint d’anciens Accélération afin de déterminer l’incidence du programme, le cas échéant, sur leur décision de poursuivre l’entrepreneuriat. D’après les données d’enquête longitudinale, nous savons que 14 % des anciens Accélération les stagiaires s’engagent dans l’entrepreneuriat, et c’est un domaine d’intérêt croissant pour Mitacs et les universités canadiennes. Nous voulons donc savoir comment nous pouvons le mieux soutenir les entrepreneurs au Canada.

Merci d’avoir pris le temps de nous aider à en apprendre davantage. Pour conclure, avez-vous des conseils à donner aux personnes ou aux organisations qui cherchent à mettre en œuvre leurs propres stratégies de mesure du rendement ?
Des modèles logiques et des stratégies de mesure du rendement devraient être élaborés à la naissance d’un programme. Un modèle logique est un excellent outil pour fournir un aperçu visuel des principales composantes d’un programme, de ses effets attendus ;
les liens de causalité théoriques entre le programme et ses objectifs.

Tout cela pour dire que la mesure du rendement et l’évaluation du programme ne devraient pas se faire à mi-chemin ou à la fin d’un programme — si vous établissez un cadre de mesure du rendement au tout début, l’évaluation des résultats sera un jeu d’enfant.


Lisez quelques-uns des travaux de l’équipe d’évaluation de Mitacs :

Avatar
Mitacs

Mitacs donne des ailes à l’innovation canadienne grâce à des partenariats efficaces qui débouchent sur des solutions à nos problèmes les plus pressants. En favorisant la croissance économique et la productivité, nous produisons des changements concrets pour améliorer la qualité de vie de l’ensemble de la population canadienne.