Catégories d'outils d’évaluation

En parcourant la bibliothèque des évaluations, vous remarquerez que chaque outil d’évaluation ou de mesure est représenté par l'une des trois illustrations suivantes : un arbre adulte (fruitier), un jeune arbre ou une jeune pousse.

Une série de données probantes sur la fiabilité et la validité de chaque outil d’évaluation/de mesure est disponible. Par ailleurs, nous reconnaissons que l’interprétation de ces données peut être complexe. La fiabilité fait référence à la cohérence et la précision des résultats fournis par l’outil d’évaluation/de mesure. La validité désigne le degré auquel les données de l’outil d’évaluation/de mesure appuient les utilisations et les interprétations prévues de ses résultats. Les données attestant la validité doivent permettre de déterminer si l’outil d’évaluation/de mesure saisit le modèle hypothétique approprié qu’il vise à évaluer, dans le cadre des usages prévus. Selon les objectifs, différents types et niveaux de robustesse des éléments de preuves peuvent être requis en termes de fiabilité et de validité. Les qualifications – jeunes pousses, jeunes arbres et arbres adultes – visent à illustrer la proportion des preuves disponibles à ce jour et la confiance que nous accordons à la capacité de l’outil d’évaluation/de mesure à être utilisé dans le contexte et pour l’objectif spécifié, afin de fournir des données de haute qualité. 

La qualification arbre « adulte » indique que la validité de l’outil d’évaluation/de mesure est solidement établie, notamment grâce à des objectifs clairement définis et des résultats fiables, pour l’objectif, l’utilisation et le contexte spécifiés. La qualification « jeune arbre » indique un outil d’évaluation/de mesure qui présente des preuves de validité et de fiabilité prometteuses, mais qui nécessite davantage de données probantes, de révisions et de tests pour être reproduit et utilisé dans d'autres échantillons/contextes en vue de l'objectif visé. La qualification « jeune pousse » signifie que l’outil d’évaluation/de mesure est en phase de développement et n’est pas encore prêt à être utilisé.

La qualification « jeune pousse » est attribuée lorsque les preuves de fiabilité et de validité disponibles ne sont pas suffisantes pour suggérer que l’outil d’évaluation/de mesure est prêt à être utilisé dans le(s) but(s) visé(s). Compte tenu du modèle d'échantillonnage, de la taille de l'échantillon et de la rigueur de la méthode psychométrique, une incertitude subsiste quant à la reproductibilité ou à l'exactitude des données si elles étaient testées avec un échantillon similaire. Dans ce cas, la bibliothèque des évaluations publiera le rapport sur les données probantes, mais ne diffusera ni les outils ni le matériel de formation. Elle fournira également les coordonnées des développeurs pour permettre à toute partie intéressée de les contacter en vue de l’utilisation et de l’adaptation de l’outil.

La qualification « jeune arbre » est attribuée lorsqu'il existe des données prometteuses en matière de fiabilité et de validité de l’outil d’évaluation/de mesure et que celui-ci est prêt à être utilisé aux fins prévues avec des échantillons/contextes similaires. Compte tenu du modèle d’échantillonnage, de la taille de l'échantillon et de la rigueur de la méthode psychométrique, nous sommes relativement confiants quant à fiabilité de la reproductibilité ou de l'exactitude des données factuelles si elles étaient testées avec un échantillon similaire. Nous proposons des recommandations de révisions et nous encourageons à continuer de tester les outils d’évaluation/de mesure et de partager les résultats obtenus. La bibliothèque des évaluations publiera le kit complet d’évaluation, qui comprendra l'outil d’évaluation/de mesure, le rapport sur les données probantes ainsi que le matériel de formation qui l'accompagnent.

La qualification « arbre adulte » est attribuée lorsque des preuves solides confirment la fiabilité et la validité de l’outil d’évaluation/de mesure pour les objectifs visés, et que celui-ci est prêt à être utilisé et adapté à de nouveaux contextes ou échantillons. Compte tenu du modèle d'échantillonnage, de la taille de l'échantillon et de la rigueur de la méthode psychométrique, nous sommes très confiants quant à la qualité des données probantes et à la possibilité de les reproduire aux fins prévues. Des recommandations pour des révisions mineures sont proposées pour une utilisation dans un contexte similaire et pour le même objectif. Pour être utilisé dans un nouveau contexte ou à une nouvelle fin, l’outil d’évaluation/de mesure doit être ajusté, testé et validé sur le plan psychométrique avec de nouveaux échantillons, contextes ou objectifs. Dans un tel cas, nous encourageons vivement à partager les données ainsi que les adaptations spécifiques qu'elles ont nécessitées avec la bibliothèque des évaluations de l'INEE. Ces données seront ensuite évaluées pour leur qualité dans le cadre d'un nouvel échantillon, contexte, objectif, et processus d'adaptation, et pourraient être publiées dans la BE. Pour cette classification, la bibliothèque des évaluations publiera le kit complet d’évaluation qui comprendra l'outil d’évaluation/de mesure, le rapport des données probantes et le matériel de formation qui l'accompagnent.