1.3.2 Évaluation

Grâce au Centre de psychologie du personnel (CPP) de la CFP et des unités régionales de service à la clientèle, la sous-activité liée à l’évaluation permet de fournir des produits et services dans le domaine de l’évaluation, au moyen de travaux de recherche et d’élaboration, de consultation, d’évaluation et de counselling. Ces outils servent aux fins de dotation, de sélection et de perfectionnement dans l’ensemble de la fonction publique fédérale.

La CFP continuera de mettre au point et d’adapter les services d’évaluation qu’elle offre, de manière à ce qu’ils demeurent pertinents pour les ministères et organismes et continuent de répondre à leurs besoins en constante évolution.

*Remarque : Le total des autorisations correspond aux allocations budgétaires internes de la CFP.

Information sur le rendement

Résultat attendu : Prestation de services d’évaluation conformément aux normes de service établies

Indicateur de rendement: Pourcentage de services d’évaluation offerts conformément aux normes de service; nombre de mesures d’adaptation prises lors d’évaluations; nombre de produits ayant été élaborés ou modifiés; degré de satisfaction de la clientèle par rapport aux services d’évaluation

Atteint dans la plupart des cas

• Objectif : Degré de satisfaction acceptable de la clientèle; respect des normes de service; traitement du nombre prévu de demandes

Preuve en matière de rendement : En 2008-2009, le CPP :

• a entièrement respecté (100 %) les normes de service pour l’administration du test de compétence orale (TCO) dans le cadre de l’évaluation de langue seconde (ELS);
• a reçu une cote de satisfaction globale de 95 % de la part des clients qui ont eu recours aux services de correction et d’administration des tests et qui ont produit des rapports à ce sujet (Remarque : Chaque commande de test papier-crayon est accompagnée d’un sondage sur la satisfaction de la clientèle. Toutefois, le nombre de sondages reçus est faible par rapport au nombre de commandes envoyées. Une approche à l’échelle de la direction générale quant à la satisfaction de la clientèle permettra d’améliorer la communication);
• a offert des services de counselling aux cadres supérieurs à 938 clients;
• a amélioré le délai d’exécution pour ce qui est de la correction des tests grâce à la promotion de ses services d’évaluation en ligne, à la mise en œuvre de deux nouveaux tests en ligne et à l’aide fournie aux organisations pour leur permettre de mettre en place leur propre centre d’évaluation en ligne;
• a reçu 2 442 demandes de consultation professionnelle relativement à la prise de mesures d’adaptation lors de tests, soit une augmentation de 4 % par rapport à l’exercice précédent;
• a mis au point ou mis en œuvre plus de 200 nouveaux produits d’évaluation, dont un nombre particulièrement important de formules adaptées aux personnes handicapées, un nouveau TCO et une version écourtée du test d’expression écrite d’ELS;
• a traité 8 440 appels reçus au centre d’appel du CPP.

Résultat attendu : Traitement et administration en temps opportun des ELS (interaction orale)

Indicateur de rendement: Temps d’exécution moyen pour les ELS (interaction orale)

Atteint en entier

• Objectif : 10 jours (pour la dotation impérative)

Preuve en matière de rendement : La norme établie par la CFP est de deux semaines pour les listes restreintes de dotation impérative, de quatre semaines pour la formation linguistique et de dix semaines pour les autres évaluations. En 2008-2009, la CFP a entièrement respecté ces normes, établies en fonction des priorités.

Résultat attendu : Réalisation d’études de recherche

Indicateur de rendement: Études de recherche qualitatives et études de recherche sur les pratiques exemplaires réalisées à l’appui d’outils d’évaluation et de produits connexes d’avant-garde

Atteint dans la plupart des cas

• Objectif : À déterminer

Preuve en matière de rendement : En 2008-2009, la CFP est allée au-delà de son mandat de recherche initial sur les examens non surveillés : elle a entrepris l’élaboration de deux outils d’évaluation non surveillée à utiliser dans le cadre de processus de sélection. Le premier de ces outils est un examen non surveillé d’habileté cognitive et le second, un questionnaire d’autoévaluation des compétences en expression écrite dans la seconde langue officielle. Les modifications apportées au Système de ressourcement de la fonction publique seront mises en application en octobre 2008. Ce travail permettra la mise en œuvre des deux nouveaux tests non surveillés, prévue à l’automne 2009.

En 2009-2010, la CFP étudiera la possibilité d’élaborer des tests générés par ordinateur, en commençant par l’ELS. La recherche de financement pour cette entreprise est en cours.

Points saillants relatifs au rendement

Engagement n° 1 du Rapport sur les plans et les priorités (RPP) 2008-2009 : Fournir des produits et services d’élaboration, de mise en application, de recherche et de consultation liés à l’évaluation

La CFP a respecté son engagement, qui était de réaliser 200 000 tests et évaluations pour les clients relevant de sa compétence de base ou de sa compétence élargie, en vertu de la Loi sur l’emploi dans la fonction publique. En 2008-2009, la CFP a administré environ 216 000 tests et évaluations. Par rapport à l’exercice précédent, il s’agit d’une augmentation du nombre d’évaluations de la seconde langue officielle et d’une diminution du nombre d’examens professionnels utilisés par les ministères et organismes. Selon la CFP, cette diminution est attribuable en partie au fait que ce secteur d’activités a adopté le régime de recouvrement des coûts en 2008-2009. L’ampleur de cette baisse était toutefois imprévue. La CFP poursuivra la surveillance de l’utilisation de ses examens professionnels en 2009-2010. Elle continuera également à déployer des efforts visant à mettre en place d’autres solutions normalisées, comme des examens en ligne supplémentaires, à travailler de concert avec les ministères et organismes afin d’établir de nouveaux centres d’évaluation en ligne dans les organisations, et à travailler à l’élaboration de nouvelles approches novatrices en matière d’évaluation.

Dans l’ensemble, le nombre de demandes de mesures d’adaptation à appliquer lors des examens pour les personnes handicapées qui passent un test de la CFP a continué de croître (augmentation de 4 %).

La CFP a entièrement atteint son objectif d’offrir les services liés au TCO (ELS) en temps opportun. En fait, la CFP a été en mesure de respecter ses normes de service établies en fonction des priorités (soit deux, quatre et dix semaines) dans 100 % des cas. La rapidité du traitement des demandes liées à la dotation impérative permet de procéder en temps opportun à la nomination de candidats qualifiés à des postes bilingues. Par ailleurs, une évaluation rapide de la formation linguistique permet aux employés de reprendre rapidement le travail et d’y faire usage des deux langues.

La CFP a considérablement dépassé l’objectif qu’elle s’était fixé de modifier ou de créer 22 produits d’évaluation. À cet égard, en 2008-2009, la CFP est parvenue 1) à élaborer plus de 200 formules d’examen adaptées aux personnes handicapées, 2) à terminer et à mettre en application les nouveaux TCO (ELS) et la version écourtée du nouveau test d’expression écrite (ELS), et 3) à mettre en place un nouveau système d’accès aux résultats des tests d’ELS.

La CFP a également atteint ses objectifs en matière de recherche et d’innovation liées à l’évaluation. En 2008-2009, elle a mis en place deux examens en ligne supplémentaires, qui sont administrés au moyen de sa plateforme d’évaluation en ligne. Ces deux examens sont particulièrement efficaces lorsque le nombre de candidats à gérer est élevé. La CFP a également poursuivi ses recherches en matière d’examens non surveillés. Elle a même dépassé cette étape et élaboré deux tests non surveillés : 1) un outil d’autoévaluation des compétences en expression écrite (ELS) et 2) un examen d’habileté cognitive. Ces deux outils permettront aux ministères et organismes de gérer un grand nombre de candidats provenant des quatre coins du Canada. La CFP a commencé à tester les questions d’examen en février 2009, et mettra à l’essai un nouveau système permettant d’évaluer les deux outils en 2009-2010.

Grâce à ces activités d’évaluation, la CFP :

• a aidé les ministères et organismes à accélérer le processus de dotation en traitant rapidement les TCO (ELS), en augmentant le nombre de tests proposés et en aidant les organisations à établir leur propre centre d’évaluation en ligne;
• a contribué à la nomination de personnes handicapées qualifiées en veillant à ce qu’elles soient évaluées de manière juste, grâce à la présentation de conseils et à l’élaboration de formules d’examen adaptées qui leur permettent de démontrer leurs compétences;
• a contribué à des processus de nomination rentables et fondés sur le principe du mérite en administrant des examens professionnels normalisés et en offrant des délais de réévaluation établis;
• a relevé les défis qui se sont présentés à elle en 2008-2009, soit la transition vers le régime de recouvrement des coûts pour deux services (les examens professionnels et l’adaptation des examens organisationnels), ainsi que l’amélioration de la sécurité de son programme d’évaluation.

Les régions ont entièrement rempli leur objectif d’offrir des services liés aux tests d’évaluation de langue seconde (tests de compréhension de l’écrit et d’expression écrite) : plus de 17 000 tests ont été administrés. L’évaluation s’est également effectuée au moyen d’autres outils, comme l’examen de jugement situationnel, l’examen de compétence en communication écrite et l’examen de communication écrite. La demande de services à l’endroit de l’unité chargée de l’évaluation est demeurée stable, la plupart de ses services n’étant pas offerts selon le principe de recouvrement des coûts. Cette unité a toutefois dû affronter à plusieurs reprises au cours de l’exercice le défi consistant à maintenir un bon équilibre entre les ressources et la charge de travail. Au cours de l’exercice, 176 demandes reçues (sur plus de 300) sollicitaient les services de la CFP pour qu’elle effectue des entrevues et/ou des vérifications des références au nom des clients. La transition vers le régime de recouvrement des coûts n’a pas semblé influer sur les activités de tests. Par contre, il est possible que la quantité de demandes présentées à la CFP diminue au cours du prochain exercice, étant donné que les services d’évaluation de langue seconde seront offerts selon le principe de recouvrement des coûts.

Engagement n° 2 du RPP 2008-2009 : Obtenir le pouvoir de réaffecter les revenus en 2008-2009 et le conserver par la suite

En 2008-2009, le Secrétariat du Conseil du Trésor du Canada a autorisé des pouvoirs accrus en matière de recouvrement des coûts pour ce qui est des services d’évaluation de la CFP. En vertu de ces pouvoirs, la CFP pouvait commencer à faire payer les ministères et organismes pour certains services d’évaluation qui étaient auparavant gratuits pour les organisations assujetties à la Loi sur l’emploi dans la fonction publique.

Mesures d’adaptation pour les examens (autres que ceux de la CFP) : Au cours de la première moitié de l’exercice, le nombre de demandes présentées au secteur d’activité s’occupant des mesures d’adaptation pour les examens (autres que ceux de la CFP) a chuté considérablement, lorsque les clients ont pris connaissance des nouveaux frais d’utilisation. De nombreux clients se sont dits surpris de l’introduction de ces frais, ont indiqué n’avoir reçu aucune communication de la CFP à ce sujet et ont réagi négativement au changement. Les psychologues de la CFP ont donc déployé de nombreux efforts au cours des deux premiers trimestres pour expliquer ce changement aux clients établis. Le nombre de demandes a recommencé à augmenter au cours de la seconde moitié de l’exercice pour atteindre, au quatrième trimestre, un chiffre correspondant aux moyennes mensuelles de l’exercice précédent.

La CFP suppose que la baisse observée en début d’exercice dans ce secteur d’activité pourrait s’expliquer en grande partie par le moment où l’information a été communiquée. En effet, les ministères et organismes n’ont pas bénéficié de suffisamment de temps pour s’adapter aux nouveaux frais ni pour en tenir compte dans leur cycle de planification budgétaire. Par conséquent, la CFP a accéléré la diffusion aux ministères et organismes de l’information sur les changements apportés à sa structure de prix pour 2009-2010.

Examens professionnels : En se préparant pour la transition de ce secteur d’activité vers le régime de recouvrement des coûts, la CFP a constaté que certains clients avaient tendance à commander plus de cahiers d’examen que nécessaire. Ces commandes excessives nécessitaient du travail d’emballage, de livraison et de manipulation pour du matériel d’évaluation qui n’était finalement jamais utilisé. Afin de recouvrer ces coûts, la CFP a commencé à faire payer les clients pour les cahiers d’examen non utilisés. De pair avec une amélioration de la communication et de la collaboration avec les ministères et organismes, ces frais ont permis de diminuer la fréquence des commandes excessives, d’améliorer l’efficacité du programme et de réduire les dépenses gouvernementales en général.

Ces résultats, ainsi que les conséquences positives de l’instauration de frais pour les annulations tardives et les absences, montrent que des frais de dissuasion contribuent à améliorer l’efficacité des programmes et à réduire les dépenses gouvernementales en général.

Navigation principale (colonne gauche)