Sélection de la langue

Gouvernement du Canada / Government of Canada

Recherche

Évaluation du programme du santé publique du Canada offert par l’'Agence de la santé publique du Canada

Préparé par :
Direction de l'évaluation
Agence de la santé publique du Canada et Santé Canada
Juillet 2013

Table des matières

Liste des tableaux

Résumé

Le présent rapport fait état des conclusions de l'évaluation du programme du Service de santé publique du Canada offert par l'Agence de la santé publique du Canada).

But de l'évaluation

Cette évaluation donne suite aux exigences énoncées dans la Politique sur l'évaluation du Conseil du Trésor (2009), selon laquelle tous les programmes doivent être évalués aux cinq ans, et vient appuyer la planification du programme et la prise de décisions concernant celui-ci. Il s'agit de la première évaluation du programme du Service de santé publique du Canada.

L'évaluation permettra d'établir la pertinence du programme, y compris la nécessité de maintenir ce programme et la mesure dans laquelle il cadre avec les rôles et les priorités du gouvernement fédéral et de l'Agence de la santé publique du Canada. Elle porte aussi sur le rendement de l'Agence de la santé publique du Canada, c'est-à-dire la mesure dans laquelle l'Agence a réussi à atteindre les résultats attendus du programme et à prouver l'efficience et la rentabilité de ce dernier. L'évaluation englobe la période d'avril 2006 à octobre 2012.

Dans cette évaluation ne sont pas comprises les activités liées aux autres programmes de services sur le terrain offerts par l'Agence de la santé publique du Canada, dont le Programme canadien d'épidémiologie de terrain, le Programme des agents techniques de liaison avec les laboratoires, le programme du Bureau des services de quarantaine et le programme de surveillance du VIH/sida sur le terrain.

Description du programme du Service de santé publique du Canada

L'Agence de la santé publique du Canada a créé le programme du Service de santé publique du Canada en 2006 afin de combler les besoins concernant les capacités en santé publique au Canada. Ce programme consiste à offrir, à des fonctionnaires fédéraux qualifiés du secteur de la santé publique (agents de santé publique), des emplois temporaires dans des organismes de santé publique (organismes d'accueil) de partout au Canada afin de répondre aux besoins de ces organismes en matière de santé publique, qu'il s'agisse de besoins courants à court terme ou de nouveaux besoins. Les organismes d'accueil peuvent être des autorités sanitaires provinciales, territoriales et locales, de même que des organisations non gouvernementales du domaine de la santé publique. Les affectations offertes aux agents de santé publique visent à contribuer à l'atteinte des résultats intermédiaires suivants : accroître les capacités de l'organisme d'accueil en matière de santé publique et offrir aux agents de santé publique une occasion de perfectionnement professionnel. En travaillant dans les organismes d'accueil, les agents de santé publique devraient acquérir une expérience appréciable dans une vaste gamme de domaines et de contextes liés à la santé publique, ce qui devrait les aider à se préparer à participer aux mobilisations (interventions du gouvernement fédéral en cas d'urgence en santé ou de pandémie) qui pourraient devoir être organisées en cas de besoin. Dans le cadre d'un sous-volet du programme, des étudiants des cycles supérieurs se voient offrir la possibilité d'effectuer des stages de recherche dans des organismes de santé publique situés dans des collectivités du Nord et, par la même occasion, d'aider à combler les besoins ciblés de l'organisme en matière de capacités.

La présente évaluation porte sur les deux composantes du programme du Service de santé publique du Canada. L'Agence de la santé publique du Canada a alloué environ 3,4 millions de dollars à ce programme en 2012-2013 et, depuis la création du programme, elle y a investi 13,2 millions de dollars. Le programme compte actuellement 14 agents de santé publique actifs.

Résultats de l'évaluation, conclusions et recommandations

La synthèse et l'analyse des données recueillies aux fins de cette évaluation ont permis de tirer des conclusions sur la pertinence et le rendement, lesquelles ont donné lieu à trois recommandations.

Résumé des résultats et des conclusions

Pertinence

La nécessité de renforcer les capacités en matière de santé publique au Canada est toujours présente. Bien que les données empiriques récentes soient limitées, il existe des lacunes reconnues dans les capacités en santé publique d'un grand nombre de régions (territoires du Nord, provinces de l'Atlantique, régions rurales/éloignées) et de professions (épidémiologistes, personnel infirmier et analystes des politiques), lacunes que le Service de santé publique du Canada tente de combler.

Le renforcement des capacités du Canada en santé publique est un rôle approprié pour le gouvernement fédéral et l'Agence de la santé publique du Canada. Au Canada, la santé publique est une responsabilité partagée entre le gouvernement fédéral, les gouvernements provinciaux et territoriaux, les administrations municipales, le secteur privé, les organisations non gouvernementales, les professionnels de la santé et le public. Bien que les provinces et les territoires soient les principaux responsables de leurs besoins respectifs en matière de ressources humaines et de capacités, les lacunes dans ces secteurs peuvent affecter l'ensemble du système de santé publique. Les interventions en cas d'événement lié à la santé publique peuvent avoir une portée nationale et excéder les capacités d'une province ou d'un territoire, qui peut alors se trouver dans l'impossibilité d'intervenir seul. Dans une telle situation, le gouvernement du Canada peut, à juste titre, décider de jouer un rôle de soutien. Sous réserve de considérations relatives aux politiques gouvernementales, les pouvoirs de dépenser peuvent être utilisés pour créer des programmes non réglementaires dans des domaines de compétence provinciale.

Le mandat de l'Agence de la santé publique du Canada consiste à aider le ministre de la Santé dans l'exercice de ses attributions en matière de santé publique. De façon générale, le rôle de l'Agence de la santé publique du Canada dans la prise en charge des besoins du pays en matière de capacités en santé publique reflète et appuie sa propre mission, à savoir « promouvoir et protéger la santé de tous les Canadiens grâce au leadership, à des partenariats, à l'innovation et aux interventions en santé publique ». Le rôle de l'Agence de la santé publique du Canada englobe les éléments suivants : collaboration intergouvernementale en matière de santé publique; facilitation de l'adoption d'approches nationales en santé publique; mesures et interventions d'urgence; prévention et contrôle des maladies chroniques et infectieuses.

Le rôle du gouvernement fédéral est défini de façon plus approfondie dans les autorisations de programme visant à faciliter la préparation en cas de grippe aviaire ou de pandémie de grippe. L'Agence de la santé publique du Canada a reçu des fonds pour s'attaquer aux lacunes liées aux capacités en santé publique par le biais d'activités visant à :

  • bâtir un effectif de santé publique compétent et réceptif dans l'ensemble du Canada;
  • offrir la capacité essentielle en santé publique nécessaire pour se préparer aux urgences de santé publique et y répondre.

Le programme du Service de santé publique du Canada ne semble pas constituer une duplication du rôle des autres intervenants. Cependant, ce programme pourrait chevaucher le Programme canadien d'épidémiologie de terrain, en particulier s'il accorde une plus grande priorité aux activités de formation et de perfectionnement des agents de santé publique qu'au renforcement des capacités des organismes.

Le renforcement des capacités du pays en santé publique est une priorité pour le gouvernement du Canada et l'Agence de la santé publique du Canada, et il fait partie de trois des orientations stratégiques de l'Agence pour les cinq prochaines années, comme l'indiquent les documents stratégiques de l'Agence : leadership en matière de promotion de la santé, de prévention des maladies et de protection de la santé; capacité accrue en santé publique et leadership scientifique; et amélioration des mesures et interventions d'urgence.

Rendement

Le programme du Service de santé publique du Canada a réalisé des progrès en vue de l'atteinte de son résultat intermédiaire qui consistait à aider à combler les lacunes en santé publique des organismes d'accueil participants. Le travail accompli par les agents de santé publique a fourni aux organismes une capacité accrue de mener leurs activités fondamentales courantes en santé publique et de réaliser les projets prioritaires autodéterminés qu'ils avaient auparavant été incapables de mener à bien, ainsi qu'une capacité accrue d'intervenir en cas d'événement lié à la santé publique. De même, le travail accompli par les étudiants a contribué à combler les lacunes des organismes sur le plan des capacités organisationnelles en leur permettant d'entreprendre différents projets qui n'auraient autrement pas pu être réalisés dans les délais souhaités.

Les données recueillies aux fins de l'évaluation indiquent aussi que le programme du Service de santé publique du Canada a réalisé des progrès en vue de l'atteinte de son résultat intermédiaire qui consistait à accroître la capacité des organismes partenaires de répondre à leurs besoins en santé publique. Les superviseurs des organismes d'accueil ont déclaré que les agents de santé publique avaient aidé leur organisme en permettant à celui-ci de tirer profit de leurs compétences techniques, par exemple en ce qui concerne la surveillance et l'analyse épidémiologiques, la préparation de rapports de haute qualité, le réseautage, de même que la prestation de formation au personnel de l'organisme. Les agents de santé publique ont également favorisé le transfert de connaissances en partageant les enseignements tirés de leurs affectations précédentes dans d'autres organismes.

Bien que les organismes aient tiré profit du travail accompli par les agents de santé publique, cette capacité accrue pourra vraisemblablement être perdue, dans certains cas, lorsque l'agent sera affecté à un autre organisme, à moins que des efforts délibérés soient déployés durant le mandat de l'agent pour faire en sorte que cette capacité accrue soit maintenue.

Des progrès ont aussi été réalisés en vue de l'atteinte du résultat intermédiaire visant à créer un bassin d'agents de santé publique capables de participer à diverses interventions en santé publique, y compris des mobilisations. Ces progrès appuient à leur tour les intentions énoncées dans les autorisations de programme, qui prévoyaient la création d'un effectif de santé publique compétent et réceptif dans l'ensemble du Canada, capable d'offrir la capacité essentielle en santé publique nécessaire pour se préparer aux urgences de santé publique et y répondre. Les agents de santé publique ont travaillé à des projets dans divers domaines de la santé publique, ont assisté à des séances de formation en groupe en vue de se préparer à d'éventuelles mobilisations et, dans certains cas, ont eu l'occasion de participer à une mobilisation.

De façon similaire, le programme a également réalisé des progrès en vue de l'atteinte des résultats intermédiaires concernant le perfectionnement des agents de santé publique. Bien que le programme n'ait pas encore établi de plan de formation officiel sur les compétences de base ou de documents connexes sur la mesure du rendement, les agents de santé publique, actuels et anciens, ont déclaré avoir acquis des connaissances et des compétences transférables à la suite de leurs affectations dans les organismes. De plus, les étudiants ont satisfait aux exigences applicables à l'obtention de leur diplôme d'études supérieures en santé publique et ont acquis de l'expérience en ce qui concerne le travail en santé publique dans le Nord.

Bien que le programme ait réalisé des progrès en vue de l'atteinte des résultats intermédiaires actuellement prévus dans l'ébauche de son modèle logique, l'évaluation a permis de déterminer qu'il reste des enjeux importants en ce qui concerne la conception générale et la prestation du programme. De nombreux intervenants ne comprennent pas bien les résultats attendus et les principes théoriques connexes du programme. Par conséquent, le processus de sélection des organismes et de jumelage semble avoir fait en sorte que les organismes d'accueil choisis ne représentent pas les régions du pays où les besoins en matière de capacités en santé publique sont les plus importants, comme l'ont souligné les principaux représentants provinciaux et territoriaux durant la collecte des données. De plus, le manque de souplesse en ce qui a trait à la durée des affectations et les exigences relatives à la rotation des agents de santé publique ont eu des conséquences négatives sur les résultats du programme, tant pour les organismes d'accueil que pour les agents. L'obligation de changer d'organisme et de déménager dans une autre province ainsi que les difficultés que cela représente ont aussi nui au maintien en poste des agents de santé publique.

Enfin, d'autres enjeux restent à surmonter. À ce titre, soulignons le niveau limité de collaboration et d'échange de connaissances entre les participants au programme du Service de santé publique du Canada et les employés de l'Agence de la santé publique du Canada qui travaillent dans des domaines connexes. La collaboration pourrait favoriser l'échange de connaissances et l'établissement de partenariats entre les secteurs de programme, ce qui contribuerait à améliorer l'efficience et l'efficacité de la prestation des activités de programme. De plus, aucune stratégie de mesure du rendement n'a été mise en place pour aider le Bureau de la pratique en santé publique à surveiller les progrès réalisés et pour contribuer à la prise de décisions concernant le programme et, par conséquent, les données sur le rendement pourraient avoir été mieux utilisées pour évaluer le programme et adapter son rendement dans l'ensemble.

Recommandations

Résultats escomptés

L'Agence de la santé publique du Canada a pour objectif de renforcer les capacités en santé publique au Canada en offrant divers programmes de services sur le terrain. Chacun de ces programmes vise une composante ou un élément précis du système de santé publique et emploie sa propre approche unique pour renforcer les capacités. Bien que l'Agence s'efforce actuellement de définir et de décrire en quoi consistent l'effectif et les capacités en santé publique, au moment de la collecte des données, cette terminologie ne semblait pas être comprise de façon uniforme à l'échelle de l'Agence. Par conséquent, la façon précise dont le programme du Service de santé publique du Canada complète les autres efforts déployés par l'Agence dans ce domaine n'est pas clairement énoncée.

Les données probantes recueillies aux fins de l'évaluation indiquent que les objectifs du programme du Service de santé publique du Canada ne sont pas clairs ou bien compris par l'ensemble des intervenants du programme. Cela pourrait dépendre de bien des facteurs. Premièrement, les responsables du programme ont davantage traité des activités relatives à la grippe aviaire et aux pandémies et, par le fait même, ils ont fourni moins de renseignements sur le but précis et la raison d'être du programme du Service de santé publique du Canada. Deuxièmement, il existe peu de documents détaillés (stratégiques et descriptifs) au sujet du programme. Troisièmement, il n'existe pas de modèle logique, approuvé par la direction, résumant les principes théoriques du programme. Un modèle logique a été fourni pour les besoins de la présente évaluation; cependant, il était incomplet, car les deux résultats finaux du programme étaient toujours en cours d'élaboration au moment de la réalisation de l'évaluation. Enfin, le modèle logique énonce les résultats généraux du programme (immédiats, intermédiaires et finaux), mais il n'indique pas clairement les intrants, les activités et les extrants du programme. De plus, le modèle logique ne renferme pas de résultats clairement définis. Par exemple, le résultat final visant à « renforcer les capacités en santé publique » est interprété différemment par les divers intervenants du programme.

Ce manque de clarté dans les principes théoriques du programme a eu des répercussions négatives sur la prestation du programme et, par le fait même, sur sa capacité d'atteindre les résultats les plus appropriés pour l'Agence dans le contexte des autres programmes de services sur le terrain.

Recommandation 1

Dans le contexte des orientations et des efforts stratégiques de l'Agence visant à renforcer les capacités en santé publique, déterminer, articuler et communiquer les résultats attendus du programme.

Conception et prestation

Parce que les résultats attendus du programme ne sont pas clairement énoncés, le modèle de prestation du programme n'est pas assorti d'une approche stratégique claire, cohérente et bien comprise. Les critères de sélection utilisés pour évaluer les demandes présentées par les organismes sont le meilleur exemple de cette lacune. Ces critères ne sont pas bien définis et ont subi de nombreuses révisions depuis la création du programme. De plus, ils semblent paradoxaux, étant donné que le modèle actuel de prestation du programme n'appuie peut-être pas l'atteinte des deux résultats intermédiaires. Les critères de sélection des organismes ne semblent pas non plus refléter ou appuyer toutes les activités décrites dans le mandat initial du programme (p. ex. capacité d'appoint), et ils ne sont peut-être pas liés aux priorités actuelles du programme.

Les critères de sélection des organismes ont également contribué, en partie, au fait que les organismes sélectionnés ne semblent pas représenter les régions du pays où les besoins perçus en matière de santé publique sont les plus importants. Bien que les coordonnateurs régionaux aient consulté les intervenants provinciaux, territoriaux et locaux, par le biais du processus de demande de propositions, afin de cerner leurs besoins et priorités en matière de capacités, les commentaires formulés par les principaux représentants provinciaux et territoriaux donnent à penser que le programme ne rejoint toujours pas les régions des provinces et des territoires ayant les plus grands besoins. Les affectations actuelles d'agents de santé publique reflètent les besoins en matière de capacités en santé publique liés à la profession (épidémiologistes, personnel infirmier en santé publique, analystes des politiques); cependant, elles ne reflètent pas les disparités régionales reconnues (collectivités du Nord, provinces de l'Atlantique, régions rurales et éloignées). Par exemple, la région du Nord (tous les territoires combinés) et la région de l'Est (toutes les provinces de l'Atlantique combinées) du Canada, deux régions dont les besoins en matière de capacités sont reconnus, n'ont reçu ensemble qu'environ 43 % des affectations. Jusqu'à présent, il n'y a eu aucune affectation d'agents de santé publique dans la province de Québec en raison de la législation québécoise. Cela signifie que la majorité (57 %) des affectations a eu lieu dans les cinq autres provinces (Ontario,Colombie-Britannique, Alberta, Saskatchewan et Manitoba), provinces qui, selon les données recueillies pour les besoins de cette évaluation, n'ont pas les plus grands besoins en matière de capacités. De plus, la majorité des affectations réalisées jusqu'à présent ont eu lieu dans de grands centres urbains, ce qui va à l'encontre des commentaires formulés par les informateurs clés, selon lesquels la priorité devrait être accordée aux régions rurales et éloignées.

De façon similaire, la durée actuelle des affectations et les exigences relatives à la rotation des agents de santé publique n'appuient peut-être pas l'atteinte des résultats attendus du programme. Par exemple, l'obligation d'affecter les agents de santé publique à un autre organisme après la période prévue de deux ans a fait en sorte que certains organismes d'accueil sont restés aux prises avec des travaux non terminés, et que leurs besoins en matière de capacités sont toujours présents. De même, l'obligation de changer d'organisme après deux ans a eu un impact négatif sur les résultats concernant l'apprentissage et le perfectionnement des agents de santé publique, et a ralenti la création d'un bassin durable d'agents de santé publique en raison des difficultés liées au maintien en poste des agents. Bien que certains agents de santé publique aient quitté le programme pour donner suite à des possibilités sur le plan des études ou de la carrière, la plupart (environ 80 %) ont affirmé quitter le programme en raison de leur mécontentement par rapport aux exigences liées à la rotation.

En énonçant une orientation stratégique claire et en élaborant les processus opérationnels connexes nécessaires, le programme sera en mesure d'utiliser ses ressources afin d'atteindre plus efficacement ses résultats prioritaires. Le fait de fixer une exigence selon laquelle les organismes d'accueil doivent disposer d'une solide capacité de mentorat afin de faciliter le perfectionnement professionnel des agents de santé publique pourrait également contribuer à l'atteinte de ces résultats.

Recommandation 2

Examiner et réviser les pratiques opérationnelles actuelles, y compris les méthodes de sélection des organismes, de rotation et d'établissement de la durée des affectations, afin de favoriser l'atteinte des résultats souhaités.

Mesure du rendement

Le programme du Service de santé publique du Canada ne dispose pas d'une stratégie officielle de mesure du rendement lui permettant de surveiller les progrès réalisés et de contribuer à la prise de décisions concernant le programme. Ce problème est exacerbé par l'absence d'un modèle logique détaillé, approuvé par la direction, et d'un document connexe décrivant clairement les principes théoriques du programme.

Une quantité limitée de données sur le rendement a été recueillie au sujet des résultats du programme, et les données recueillies à propos des activités et des résultats semblent être incohérentes et irrégulières. Les lacunes dans les données sur le rendement ont compliqué la mesure et l'évaluation des progrès réalisés par le programme en vue de l'atteinte de ses résultats concernant les agents de santé publique, les étudiants et les organismes d'accueil. De plus, il n'y a aucune preuve attestant que les données sur le rendement recueillies ont déjà été utilisées pour éclairer la prise de décisions stratégiques ou de décisions relatives au programme du Service de santé publique du Canada.

Des activités prometteuses sont en cours, ce qui donne à penser qu'une stratégie de mesure du rendement plus complète sera élaborée pour le programme du Service de santé publique du Canada. Par exemple, le programme travaille à l'élaboration d'un modèle logique plus complet et plus détaillé qui énoncera clairement les principes théoriques du changement proposé. Bien qu'il s'agisse là de signes positifs d'une fonction de mesure du rendement plus efficace, les travaux futurs devront être réalisés selon une approche complète (consignation des extrants et des résultats liés aux affectations d'agents de santé publique et aux stages d'étudiants) fondée sur une théorie du changement claire, intégrés systématiquement dans les opérations, et utilisés activement dans les pratiques de gestion en vue de l'évaluation et de l'ajustement du rendement.

Collaboration

Depuis la création du programme du Service de santé publique du Canada en 2006, le personnel a entrepris des discussions afin d'échanger de l'information et de collaborer avec certains secteurs du Bureau de la pratique en santé publique et d'autres collègues de l'Agence de la santé publique du Canada au sujet de travaux connexes.

Il y a eu une collaboration importante avec les agents régionaux, y compris des partenariats visant à offrir diverses occasions de formation aux agents de santé publique et à d'autres employés de l'Agence de la santé publique du Canada qui travaillent dans des domaines connexes. La relation de travail établie entre les employés du programme du Service de santé publique du Canada travaillant au bureau de la région de la capitale nationale et ceux des divers bureaux régionaux de l'Agence de la santé publique du Canada a joué un rôle clé dans la prestation efficace du programme, et les liens permanents entre ces bureaux ont été un élément essentiel de la conception et de la prestation de ce programme.

La collaboration avec d'autres secteurs de l'Agence est minime. Par exemple, il y a très peu de collaboration et d'échange de connaissances entre les agents de santé publique/étudiants et les employés de l'Agence de la santé publique du Canada travaillant dans des domaines similaires, et les agents de santé publique ne saisissent pas bien les occasions d'établir des liens avec des spécialistes de certains dossiers de l'Agence de la santé publique du Canada, qui pourraient les soutenir dans les activités menées dans le cadre leur affectation.

On ne connaît pas l'impact de cette lacune sur la capacité de l'Agence de la santé publique du Canada d'atteindre les objectifs établis pour le programme du Service de santé publique du Canada de la façon la plus efficiente possible. On estime qu'un niveau plus élevé d'intégration et de collaboration permettrait de tirer un meilleur parti des connaissances et d'améliorer l’efficacité du programme.

Recommandation 3

Maximiser les occasions d’améliorer le rendement du programme en :

  • a)renforçant la méthode de mesure du rendement du programme afin de mieux orienter le processus       décisionnel du programme;
  • b)organisant des activités de collaboration et d’échange de connaissances au sein de l’Agence de la santé
          publique Canada.

Détails de la page

Date de modification :