Etude d'Impact Du Financement Basé sur Les Résultats 2016, Enquête des Institutions de Santé (IS) - Etude de Base
Haiti, 2015 - 2016
Damien de Walque, Marion Cros (Consultante), Dr. Johnny Calonge, Dr. Samuel Raymond
Created on
May 24, 2017
Last modified
May 24, 2017
Page views
32566
Download
9121
Documentation in PDF
Metadata
DDI/XML
JSON
Identification
Survey ID Number
HTI_2015_HRBFIE-FBL_v01_M
Title
Etude d'Impact Du Financement Basé sur Les Résultats 2016, Enquête des Institutions de Santé (IS) - Etude de Base
Subtitle
Enquête des Institutions de Santé (IS) - Etude de Base
Country
| Name | Country code |
|---|---|
| Haiti | HTI |
Study type
Impact Evaluation Study
Series Information
L'étude d’impact du FBR, étude de base (2016), a commencé en Juin 2015. La collecte a eu lieu entre Octobre 2015 et Avril 2016, le nettoyage de la base de données d’Avril à Juin 2016 et l’analyse a eu lieu entre Juillet et Septembre 2016. Le rapport a été soumis à l’unité de contractualisation, Management Sciences for Health (MSH) et la Banque Mondiale en Septembre pour une première série de commentaires. La version finale du rapport a été remise le 25 Janvier 2017.
La Banque Mondiale et l’USAID ont cofinancé cette étude et la MSH ainsi que l’unité de contractualisation (UC) du Ministère de la Sante Publique et de la Population (MSPP) était en charge de la collecte des données, notamment de la formation, recrutement, et gestion des enquêteurs.
La seconde étude ou étude de suivi aura lieu en 2018.
La Banque Mondiale et l’USAID ont cofinancé cette étude et la MSH ainsi que l’unité de contractualisation (UC) du Ministère de la Sante Publique et de la Population (MSPP) était en charge de la collecte des données, notamment de la formation, recrutement, et gestion des enquêteurs.
La seconde étude ou étude de suivi aura lieu en 2018.
Abstract
Malgré une amélioration récente des indicateurs de santé en Haïti, de nombreux défis demeurent pour atteindre les objectifs de développement durable (ODD). Le financement basé sur les résultats (FBR) a été adopté nationalement pour tenter de résoudre certains de ces défis. En effet, la plupart des indicateurs de santé maternelle et infantile sont plus bas que ceux des pays à bas revenus (PBR), notamment le taux d’accouchement réalisé par du personnel qualifié qui est à 37% mais à 51% en moyenne dans les PBR (OMS, 2015). En outre, seulement 68% des enfants de moins de 24 mois en Haïti reçoivent toutes les doses contre la diphtérie, le tétanos et la coqueluche ce qui est inférieur à la moyenne des PBR qui est de 80% (OMS, 2015). Par ailleurs, certains de ces indicateurs clés sont particulièrement faibles auprès des ménages les plus pauvres. Par exemple, 9% de femmes enceintes appartenant au quintile de richesse le plus faible accouchent en institution de santé (IS) contre 76% des femmes enceintes du quintile de richesse le plus élevé et 66% des ménages les plus pauvres ne consultent pas un prestataire lorsque malade contre 49% pour les ménages les plus riches (ECVMAS, 2013). Au niveau de l’offre, une récente étude a démontré une faible efficience technique et productivité à tous les niveaux de la pyramide des soins (Banque Mondiale, 2016) ainsi qu’une qualité des services médiocre (EPSSS, 2014). Dans ce contexte, le FBR, qui n’est certes, pas la solution miracle à tous ces maux, a démontré des résultats encourageants sur la couverture des services de santé dans les pays à bas revenus (Basinga et al, 2011 ; Soeters et al 2006 ; Sabri et al.2007 ; Rusa et al. 2009) comme en Haïti (Zeng et al, 2013). Sur la base de ces informations, le FBR a été lancé nationalement en Avril 2016 en Haïti, notamment avec un financement de la Banque Mondiale (BM) dans le Nord-Est, le Sud, le Nord-Ouest et le Centre et de l’Agence des Etats-Unis pour le Développement International (USAID) dans la Grand’Anse, les Nippes, le Nord-Est et le Nord. Nationalement, le FBR est géré par l’Unité de Contractualisation (UC) qui siège au Ministère de la Santé Publique et de la Population (MSPP).
Les deux objectifs de l’étude d’impact du FBR (étude de base) sont 1) de fournir des données de base sur les indicateurs clés du système de santé sur lesquels des effets du FBR sont attendus et 2) de s’assurer que les trois groupes de l’étude ont des caractéristiques comparables. Ces 3 groupes sont : le groupe d’intervention 1 rassemblant les IS bénéficiant du FBR et d’une assistance technique (AT) ou coaching ; le groupe d’intervention 2 : les IS recevant une AT ou du coaching seulement et le groupe 3, qui est le groupe contrôle, ne bénéficiant d’aucune intervention. L’objectif de l’étude d’impact est d’évaluer l’effet du FBR sur la couverture des services de santé infantile et maternelle, la protection financière des ménages, et quelques fonctions clés du système de santé comme la gouvernance et les ressources humaines. Ce rapport résume avant tout les résultats de l’étude de base qui est la première étape de l’étude d’impact, à savoir, la collecte des informations sur les indicateurs clés du système de santé Haïtien sur lesquels les effets du FBR sont attendus. Le second objectif de cette étude de base est de mesurer l’équilibre à la base des deux groupes d’intervention et du groupe contrôle pour s’assurer que les trois groupes aient des caractéristiques similaires de telle sorte que l’effet du FBR ne provienne pas de la différence des groupes, mais bien du FBR.
L'étude d’impact se base sur un modèle de comparaison pré-post et sur le contrôle expérimental pour répondre aux questions de recherche. Les institutions de santé (IS) sondées du secteur primaire (Centre de santé avec lit – CAL ; Centre de santé sans lit (CSL) ; Dispensaire et Hôpital Communautaire de Référence, HCR) ont été randomisés dans l'un des trois groupes/bras de l’étude : FBR et assistance technique ou coaching (intervention/t1) ; coaching (intervention/t2) et le groupe contrôle (c). En tout il y a 196 institutions, dont 73 dans le groupe 1, 73 dans le groupe 2 et 50 dans le groupe 3 et 5,884 ménages enquêtés ou 28 par aire de desserte des IS, soit 2,044 ménages dans les groupes 1 et 2 et 1,400 ménages dans le groupe 3. La taille de l’échantillon a été déterminée de telle sorte qu’il y ait un nombre suffisant de ménages et d’IS pour pouvoir détecter l’effet du FBR. 7 questionnaires ont été administrés aux IS: F1 a été administré au gestionnaire de l’IS, collectant des informations de base sur les IS ; F2 et F7 sont les modules du personnel de santé et des agents de santé communautaires (ASC) ; F3-F5 consistent à observer l’interaction entre patients et prestataires de soins sur les consultations prénatales (CPN) (F3) et les consultations infantiles de moins de 5 ans (F5) ; F4-F6 sont des entretiens de sortie des CPN et des consultations des moins de 5 ans. La collecte a eu lieu entre octobre 2015 et Mars 2016 et le FBR a commencé en Avril 2016.
Les deux objectifs de l’étude d’impact du FBR (étude de base) sont 1) de fournir des données de base sur les indicateurs clés du système de santé sur lesquels des effets du FBR sont attendus et 2) de s’assurer que les trois groupes de l’étude ont des caractéristiques comparables. Ces 3 groupes sont : le groupe d’intervention 1 rassemblant les IS bénéficiant du FBR et d’une assistance technique (AT) ou coaching ; le groupe d’intervention 2 : les IS recevant une AT ou du coaching seulement et le groupe 3, qui est le groupe contrôle, ne bénéficiant d’aucune intervention. L’objectif de l’étude d’impact est d’évaluer l’effet du FBR sur la couverture des services de santé infantile et maternelle, la protection financière des ménages, et quelques fonctions clés du système de santé comme la gouvernance et les ressources humaines. Ce rapport résume avant tout les résultats de l’étude de base qui est la première étape de l’étude d’impact, à savoir, la collecte des informations sur les indicateurs clés du système de santé Haïtien sur lesquels les effets du FBR sont attendus. Le second objectif de cette étude de base est de mesurer l’équilibre à la base des deux groupes d’intervention et du groupe contrôle pour s’assurer que les trois groupes aient des caractéristiques similaires de telle sorte que l’effet du FBR ne provienne pas de la différence des groupes, mais bien du FBR.
L'étude d’impact se base sur un modèle de comparaison pré-post et sur le contrôle expérimental pour répondre aux questions de recherche. Les institutions de santé (IS) sondées du secteur primaire (Centre de santé avec lit – CAL ; Centre de santé sans lit (CSL) ; Dispensaire et Hôpital Communautaire de Référence, HCR) ont été randomisés dans l'un des trois groupes/bras de l’étude : FBR et assistance technique ou coaching (intervention/t1) ; coaching (intervention/t2) et le groupe contrôle (c). En tout il y a 196 institutions, dont 73 dans le groupe 1, 73 dans le groupe 2 et 50 dans le groupe 3 et 5,884 ménages enquêtés ou 28 par aire de desserte des IS, soit 2,044 ménages dans les groupes 1 et 2 et 1,400 ménages dans le groupe 3. La taille de l’échantillon a été déterminée de telle sorte qu’il y ait un nombre suffisant de ménages et d’IS pour pouvoir détecter l’effet du FBR. 7 questionnaires ont été administrés aux IS: F1 a été administré au gestionnaire de l’IS, collectant des informations de base sur les IS ; F2 et F7 sont les modules du personnel de santé et des agents de santé communautaires (ASC) ; F3-F5 consistent à observer l’interaction entre patients et prestataires de soins sur les consultations prénatales (CPN) (F3) et les consultations infantiles de moins de 5 ans (F5) ; F4-F6 sont des entretiens de sortie des CPN et des consultations des moins de 5 ans. La collecte a eu lieu entre octobre 2015 et Mars 2016 et le FBR a commencé en Avril 2016.
Kind of Data
Sample survey data [ssd]
Unit of Analysis
L’enquête des institutions de santéé F1 avait l’institution de santé comme unité d’analyse.
L’enquête sur le personnel médical (F2) et des agents communautaires de santé (F7) avait le personnel médical comme unité d’analyse.
Les observations directes et entretiens de sortie avec les enfants de moins de 5 ans et femmes de première consultation prénatale (F3-F6) avaient l’individu comme unité d’analyse.
L’enquête des ménages avaient l’individu et les familles/ménages comme unité d’analyse.
L’enquête sur le personnel médical (F2) et des agents communautaires de santé (F7) avait le personnel médical comme unité d’analyse.
Les observations directes et entretiens de sortie avec les enfants de moins de 5 ans et femmes de première consultation prénatale (F3-F6) avaient l’individu comme unité d’analyse.
L’enquête des ménages avaient l’individu et les familles/ménages comme unité d’analyse.
Version
Version Description
Version 2.1 Données modifiées et anonymes pour distribution publique
F1_Principal.dta- Enquête des Institutions Sanitaires
F2_agents sante.dta - Enquête du Personnel Medical
F3_OD_CPN.dta
F1_Principal.dta- Enquête des Institutions Sanitaires
F2_agents sante.dta - Enquête du Personnel Medical
F3_OD_CPN.dta
Scope
Notes
L'évaluation se fonde sur l’enquête des ménages et l’enquête sur les établissements de santé.
Institutions de Santé (IS): L’enquête sur les Institutions de santé a été réalisée auprès de 196 établissements ciblés de l’étude. L’enquête sur les Institutions de santé comprend plusieurs modules et s’étend de F1 à F7.
1. Questionnaires F1. Le gestionnaire ou l’administrateur de l'institution de santé a été interviewé. Les enquêtes sur les établissements visent à recueillir des données sur les principaux aspects du fonctionnement des établissements ainsi que les aspects structurels de la qualité des soins.
2. Questionnaire F2 et F7-Module des travailleurs de la santé (F2) et des agents de santé communautaire (ASC) (F7) Les thèmes couverts par les questionnaires F2 et F7 comprennent les responsabilités, la rémunération, la satisfaction du personnel et l’état des connaissances.
3. Questionnaire F3-F5-Observation de l’interaction entre patients et personnel médical. L'objectif de ce module est de recueillir des informations sur ce que le personnel médical fait réellement avec les patients. Dans le cas des patients de moins de cinq ans, les instruments sont axés sur le suivi des protocoles de « Prise en charge intégrée des maladies de l'enfant » (PCIME). Pour les clientes des consultations prénatales, les instruments ont examiné si les actions clés en CPN avaient été réalisées (y compris le counseling).
4. Questionnaires F4-F6- Entretien en sortie de CPN et des consultations < 5 ans. Un échantillon aléatoire systématique de 8 patients qui visitent l'établissement (4 patients âgés de moins de cinq ans et 4 patientes en consultations prénatales) a été interrogé afin d'évaluer la perception du patient sur la qualité des soins et leur satisfaction au sein des 195 IS. Ces questionnaires contiennent des informations sur le traitement et le conseil, le temps et dépenses, la satisfaction, la confiance et les informations générales et socio-économiques.
Institutions de Santé (IS): L’enquête sur les Institutions de santé a été réalisée auprès de 196 établissements ciblés de l’étude. L’enquête sur les Institutions de santé comprend plusieurs modules et s’étend de F1 à F7.
1. Questionnaires F1. Le gestionnaire ou l’administrateur de l'institution de santé a été interviewé. Les enquêtes sur les établissements visent à recueillir des données sur les principaux aspects du fonctionnement des établissements ainsi que les aspects structurels de la qualité des soins.
2. Questionnaire F2 et F7-Module des travailleurs de la santé (F2) et des agents de santé communautaire (ASC) (F7) Les thèmes couverts par les questionnaires F2 et F7 comprennent les responsabilités, la rémunération, la satisfaction du personnel et l’état des connaissances.
3. Questionnaire F3-F5-Observation de l’interaction entre patients et personnel médical. L'objectif de ce module est de recueillir des informations sur ce que le personnel médical fait réellement avec les patients. Dans le cas des patients de moins de cinq ans, les instruments sont axés sur le suivi des protocoles de « Prise en charge intégrée des maladies de l'enfant » (PCIME). Pour les clientes des consultations prénatales, les instruments ont examiné si les actions clés en CPN avaient été réalisées (y compris le counseling).
4. Questionnaires F4-F6- Entretien en sortie de CPN et des consultations < 5 ans. Un échantillon aléatoire systématique de 8 patients qui visitent l'établissement (4 patients âgés de moins de cinq ans et 4 patientes en consultations prénatales) a été interrogé afin d'évaluer la perception du patient sur la qualité des soins et leur satisfaction au sein des 195 IS. Ces questionnaires contiennent des informations sur le traitement et le conseil, le temps et dépenses, la satisfaction, la confiance et les informations générales et socio-économiques.
Coverage
Geographic Coverage
L'enquête a couvert tous les départements d’Haïti (Nippes, Grand-Anse, Sud, Sud-Est, Nord, Nord-Est, Nord-Ouest, Centre, Nord-Ouest) sauf celui de l’Ouest.
Universe
Etablissement de Santé: L'enquête sur les établissements de santé a été réalisée auprès de 196 établissements ciblés de l'étude.
L'enquête sur les établissements de santé comprend plusieurs modules et s'étend de F1 à F7.
1. Questionnaires F1. 195 IS ont été interviewées, soit un taux de complétude de 99.4%.
2. Questionnaire F2 et F7-Module des travailleurs de la santé (medecins, infirmiers et auxiliaires) (F2) et agents de santé communautaire (ASC) (F7)
3. Questionnaire F3-F5-Observation de l'interaction entre patients et personnel médical. 4 personnels de santé ont été observés pour le formulaire F3 (nouvelle consultation prénatale) et F5 (nouvelle consultation infantile)
4. Questionnaires F4-F6- Entretien en sortie de CPN et des consultations < 5 ans. Un échantillon aléatoire systématique de 8 patients qui visitent l'établissement (4 patients âgés de moins de cinq ans et 4 patientes en consultations prénatales).
L'enquête sur les établissements de santé comprend plusieurs modules et s'étend de F1 à F7.
1. Questionnaires F1. 195 IS ont été interviewées, soit un taux de complétude de 99.4%.
2. Questionnaire F2 et F7-Module des travailleurs de la santé (medecins, infirmiers et auxiliaires) (F2) et agents de santé communautaire (ASC) (F7)
3. Questionnaire F3-F5-Observation de l'interaction entre patients et personnel médical. 4 personnels de santé ont été observés pour le formulaire F3 (nouvelle consultation prénatale) et F5 (nouvelle consultation infantile)
4. Questionnaires F4-F6- Entretien en sortie de CPN et des consultations < 5 ans. Un échantillon aléatoire systématique de 8 patients qui visitent l'établissement (4 patients âgés de moins de cinq ans et 4 patientes en consultations prénatales).
Producers and sponsors
Primary investigators
| Name | Affiliation |
|---|---|
| Damien de Walque | Banque Mondiale |
| Marion Cros (Consultante) | Management Sciences for Health |
| Dr. Johnny Calonge | Unité de contractualisation (UC) du MSPP |
| Dr. Samuel Raymond | Unité de contractualisation (UC) du MSPP |
Producers
| Name | Role |
|---|---|
| L'Unité de contractualisation (UC) du MSPP | |
| Management Sciences for Health | Assistance technique |
| la Banque Mondiale | Assistance technique |
| Index Group | Programmation des questionnaires sur tablettes |
Funding Agency/Sponsor
| Name | Abbreviation |
|---|---|
| United States Agency for International Development | USAID |
| La Banque Mondiale |
Sampling
Sampling Procedure
Description des bras de l'étude d'impact
L'évaluation se base sur un modèle de comparaison pré-post et sur le contrôle expérimental pour répondre aux questions de recherche. Les établissements de santé sondés du secteur primaire (Centre de santé avec lit - CAL ; Centre de santé sans lit (CSL) ; Dispensaire et Hôpital Communautaire de Référence, HCR) ont été randomisés dans l'un des trois groupes/bras de l'étude qui sont décrits dans le Tableau 3, ligne 1. Ce processus de répartition aléatoire vise à garantir que les trois groupes d'étude soient comparables en termes de caractéristiques observées et non observées qui pourraient affecter les résultats du traitement de sorte que les différences moyennes dans les résultats peuvent être causalement attribuées. Il y a deux interventions : une première intervention regroupe des institutions sanitaires (IS) avec du FBR et de l'assistance technique ou coaching. La seconde intervention se focalise sur le coaching mais sans FBR. L'idée d'une seconde intervention est venue suite à l'étude mesurant l'effet du financement basé sur la performance dans les sites de MSH en 2012 qui avait démontré un effet positif de l'assistance technique sur la couverture des services de santé infantile et maternelle (Zeng et al, 2013). Cependant, l'échantillon de cette étude n'était pas représentatif et les IS n'avaient pas été randomisées, donc l'étude avait des faiblesses au niveau méthodologique.
Tableau 3. Résumé de l'Echantillon par bras d'intervention
Voir Rapport de l'etude de depart
Le groupe d'intervention 1: Ce sont les sites qui bénéficieront du FBR et de l'assistance technique/coaching. Ces sites sont au nombre de 50 pour la Banque Mondiale (Nord-Ouest, Sud, Centre) et de 23 pour l'USAID (Grand'Anse, Nippes, Nord-Est et Nord). Les sites de la Banque Mondiale ont été sélectionnés aléatoirement par département, type d'établissement et score technique (entre 2 et 3) selon une méthode de proportionnalité par rapport à la taille. La notion de « score technique » a été inséré car la banque mondiale souhaitait s'assurer que les sites sélectionnés sont fonctionnels et ouverts et permettent de répondre aux questions de l'étude de base de l'étude d'impact. Les sites de l'USAID n'ont pas été sélectionnés aléatoirement car ils avaient déjà été présélectionnés sur la base de critère définis par l'USAID et le MSPP. Cependant, en appliquant les critères de « score technique » des sites de la Banque Mondiale aux sites de l'USAID, les sites de l'USAID se sont avérés être comparables aux sites de la Banque Mondiale.
Le groupe d'intervention 2 : Ce sont les sites qui bénéficient de l'assistance technique/coaching seulement. Ces sites sont au nombre de 50 pour la Banque Mondiale (Nord-Ouest, Sud et Centre) et de 23 pour l'USAID (tous les départements, sauf la Grand'Anse). Les sites de la Banque Mondiale ont été sélectionnés aléatoirement par département, type d'établissement et score technique selon une méthode de proportionnalité par rapport à la taille. Les sites de SSQH/USAID ont été sélectionnés sur la méthode d'appariement (ou « matching ») pour s'assurer que les sites SSQH/USAID ont des caractéristiques comparables entre les groupes d'intervention 1 et 2. Dans l'idéal la méthode de sélection par appariement s'effectuera par département, niveau, et score technique. Concrètement, nous devons apparier un dispensaire dit « SSQH/USAID », du Nord-Est, avec un score de 3, du groupe d'intervention 1 (FBR+ coaching) avec un dispensaire toujours de SSQH/USAID, dans le même département et avec un score équivalent pour le groupe d'intervention 2. Cependant, en pratique, il n'était pas toujours possible d'apparier les sites SSQH/USAID des groupes 1 et 2 dans le même département. Par exemple, dans le cas de la Grand'Anse, il y a 4 sites SSQH/USAID mettant en œuvre le FBR, mais il n'y a aucun autre site de SSQH/USAID pouvant être utilisé pour le groupe 2. Ainsi, des établissements de même niveau et score ont été sélectionnés dans un autre département, de préférence voisin (Nippes et Sud-Est) pour s'apparier avec les institutions sanitaires SSQH/USAID du groupe 1 de la Grand'Anse.
Les sites du Groupe de contrôle ont été sélectionnés aléatoirement à l'extérieur des zones d'intervention de l'USAID et de la Banque Mondiale (en dehors des communes avec des sites USAID, et en dehors du Nord-Ouest, du Centre et du Sud, sites Banque Mondiale). Les sites/institutions sanitaires ont été aléatoirement affectés au groupe contrôle en tenant compte du département, du niveau et du score technique par une méthode de proportionnalité à la taille.
Tableau 4. Répartition des sites par département et groupe
Voir Rapport de l'etude de depart.
Etablissement de Santé : L'enquête sur les établissements de santé a été réalisée auprès de 196 établissements ciblés de l'étude. L'enquête sur les établissements de santé comprend plusieurs modules et s'étend de F1 à F7.
1. Questionnaires F1. Le gestionnaire ou l'administrateur de l'institution de santé a été interviewé. Les enquêtes sur les établissements visent à recueillir des données sur les principaux aspects du fonctionnement des établissements ainsi que les aspects structurels de la qualité des soins. 195 IS ont été interviewées, soit un taux de complétude de 99.4%. Les informations d'une IS ont fait défaut, notamment, un site de la banque mondiale, appartenant au groupe 2, dans le département du Centre. Les données de ce site ont été collectées mais ont été perdues en raison d'un problème de synchronisation des tablettes.
2. Questionnaire F2 et F7-Module des travailleurs de la santé. Un échantillon aléatoire stratifié de 4 travailleurs de la santé a été sélectionné dans chacun des 196 établissements résultant en un nombre total de 784 observations. Moins de 4 personnels de la santé ont été interrogés dans les établissements avec moins de personnels comme c'est le cas des dispensaires. Cependant, en raison du faible taux d'utilisation et malgré plusieurs sessions de repêchage, 542 personnels de santé ont été interviewés, soit 69% de l'échantillon de départ (784). Au niveau de F7, le questionnaire sur les agents de santé communautaire (ASC) , seulement 2 ASC par IS devaient être interroges, soit 388. En tout, 304 ASC ont été interrogés sur 388 soit un taux de 78%. Les thèmes couverts par les questionnaires F2 et F7 comprennent les responsabilités, la rémunération, la satisfaction du personnel et l'état des connaissances.
3. Questionnaire F3-F5-Observation de l'interaction entre patients et personnel médical. Tandis que le module d'entretien avec personnel de santé recueille des renseignements sur les connaissances du personnel médical, l'objectif de ce module est de recueillir des informations sur ce que le personnel médical fait réellement avec les patients. 4 personnels de santé ont été observés pour le formulaire F3 (nouvelle consultation prénatale) et F5 (nouvelle consultation infantile), cependant 543 consultations prénatales (69%) et 545 consultations infantiles sur 784 ont été observées (70%). Dans le cas des patients de moins de cinq ans, les instruments sont axés sur le suivi des protocoles de « Prise en charge intégrée des maladies de l'enfant » (PCIME). Pour les clientes des consultations prénatales, les instruments ont examiné si les actions clés en CPN avaient été réalisées (y compris le counseling).
4. Questionnaires F4-F6- Entretien en sortie de CPN et des consultations < 5 ans. Un échantillon aléatoire systématique de 8 patients qui visitent l'établissement (4 patients âgés de moins de cinq ans et 4 patientes en consultations prénatales) a été interrogé afin d'évaluer la perception du patient sur la qualité des soins et leur satisfaction au sein des 195 IS. Ces questionnaires contiennent des informations sur le traitement et le conseil, le temps et dépenses, la satisfaction, la confiance et les informations générales et socio-économiques. Au total 543 femmes en consultations prénatales ont été interrogés soit 69% et 545 accompagnateurs d'enfants de moins de 5 ans, soit 70%.
L'évaluation se base sur un modèle de comparaison pré-post et sur le contrôle expérimental pour répondre aux questions de recherche. Les établissements de santé sondés du secteur primaire (Centre de santé avec lit - CAL ; Centre de santé sans lit (CSL) ; Dispensaire et Hôpital Communautaire de Référence, HCR) ont été randomisés dans l'un des trois groupes/bras de l'étude qui sont décrits dans le Tableau 3, ligne 1. Ce processus de répartition aléatoire vise à garantir que les trois groupes d'étude soient comparables en termes de caractéristiques observées et non observées qui pourraient affecter les résultats du traitement de sorte que les différences moyennes dans les résultats peuvent être causalement attribuées. Il y a deux interventions : une première intervention regroupe des institutions sanitaires (IS) avec du FBR et de l'assistance technique ou coaching. La seconde intervention se focalise sur le coaching mais sans FBR. L'idée d'une seconde intervention est venue suite à l'étude mesurant l'effet du financement basé sur la performance dans les sites de MSH en 2012 qui avait démontré un effet positif de l'assistance technique sur la couverture des services de santé infantile et maternelle (Zeng et al, 2013). Cependant, l'échantillon de cette étude n'était pas représentatif et les IS n'avaient pas été randomisées, donc l'étude avait des faiblesses au niveau méthodologique.
Tableau 3. Résumé de l'Echantillon par bras d'intervention
Voir Rapport de l'etude de depart
Le groupe d'intervention 1: Ce sont les sites qui bénéficieront du FBR et de l'assistance technique/coaching. Ces sites sont au nombre de 50 pour la Banque Mondiale (Nord-Ouest, Sud, Centre) et de 23 pour l'USAID (Grand'Anse, Nippes, Nord-Est et Nord). Les sites de la Banque Mondiale ont été sélectionnés aléatoirement par département, type d'établissement et score technique (entre 2 et 3) selon une méthode de proportionnalité par rapport à la taille. La notion de « score technique » a été inséré car la banque mondiale souhaitait s'assurer que les sites sélectionnés sont fonctionnels et ouverts et permettent de répondre aux questions de l'étude de base de l'étude d'impact. Les sites de l'USAID n'ont pas été sélectionnés aléatoirement car ils avaient déjà été présélectionnés sur la base de critère définis par l'USAID et le MSPP. Cependant, en appliquant les critères de « score technique » des sites de la Banque Mondiale aux sites de l'USAID, les sites de l'USAID se sont avérés être comparables aux sites de la Banque Mondiale.
Le groupe d'intervention 2 : Ce sont les sites qui bénéficient de l'assistance technique/coaching seulement. Ces sites sont au nombre de 50 pour la Banque Mondiale (Nord-Ouest, Sud et Centre) et de 23 pour l'USAID (tous les départements, sauf la Grand'Anse). Les sites de la Banque Mondiale ont été sélectionnés aléatoirement par département, type d'établissement et score technique selon une méthode de proportionnalité par rapport à la taille. Les sites de SSQH/USAID ont été sélectionnés sur la méthode d'appariement (ou « matching ») pour s'assurer que les sites SSQH/USAID ont des caractéristiques comparables entre les groupes d'intervention 1 et 2. Dans l'idéal la méthode de sélection par appariement s'effectuera par département, niveau, et score technique. Concrètement, nous devons apparier un dispensaire dit « SSQH/USAID », du Nord-Est, avec un score de 3, du groupe d'intervention 1 (FBR+ coaching) avec un dispensaire toujours de SSQH/USAID, dans le même département et avec un score équivalent pour le groupe d'intervention 2. Cependant, en pratique, il n'était pas toujours possible d'apparier les sites SSQH/USAID des groupes 1 et 2 dans le même département. Par exemple, dans le cas de la Grand'Anse, il y a 4 sites SSQH/USAID mettant en œuvre le FBR, mais il n'y a aucun autre site de SSQH/USAID pouvant être utilisé pour le groupe 2. Ainsi, des établissements de même niveau et score ont été sélectionnés dans un autre département, de préférence voisin (Nippes et Sud-Est) pour s'apparier avec les institutions sanitaires SSQH/USAID du groupe 1 de la Grand'Anse.
Les sites du Groupe de contrôle ont été sélectionnés aléatoirement à l'extérieur des zones d'intervention de l'USAID et de la Banque Mondiale (en dehors des communes avec des sites USAID, et en dehors du Nord-Ouest, du Centre et du Sud, sites Banque Mondiale). Les sites/institutions sanitaires ont été aléatoirement affectés au groupe contrôle en tenant compte du département, du niveau et du score technique par une méthode de proportionnalité à la taille.
Tableau 4. Répartition des sites par département et groupe
Voir Rapport de l'etude de depart.
Etablissement de Santé : L'enquête sur les établissements de santé a été réalisée auprès de 196 établissements ciblés de l'étude. L'enquête sur les établissements de santé comprend plusieurs modules et s'étend de F1 à F7.
1. Questionnaires F1. Le gestionnaire ou l'administrateur de l'institution de santé a été interviewé. Les enquêtes sur les établissements visent à recueillir des données sur les principaux aspects du fonctionnement des établissements ainsi que les aspects structurels de la qualité des soins. 195 IS ont été interviewées, soit un taux de complétude de 99.4%. Les informations d'une IS ont fait défaut, notamment, un site de la banque mondiale, appartenant au groupe 2, dans le département du Centre. Les données de ce site ont été collectées mais ont été perdues en raison d'un problème de synchronisation des tablettes.
2. Questionnaire F2 et F7-Module des travailleurs de la santé. Un échantillon aléatoire stratifié de 4 travailleurs de la santé a été sélectionné dans chacun des 196 établissements résultant en un nombre total de 784 observations. Moins de 4 personnels de la santé ont été interrogés dans les établissements avec moins de personnels comme c'est le cas des dispensaires. Cependant, en raison du faible taux d'utilisation et malgré plusieurs sessions de repêchage, 542 personnels de santé ont été interviewés, soit 69% de l'échantillon de départ (784). Au niveau de F7, le questionnaire sur les agents de santé communautaire (ASC) , seulement 2 ASC par IS devaient être interroges, soit 388. En tout, 304 ASC ont été interrogés sur 388 soit un taux de 78%. Les thèmes couverts par les questionnaires F2 et F7 comprennent les responsabilités, la rémunération, la satisfaction du personnel et l'état des connaissances.
3. Questionnaire F3-F5-Observation de l'interaction entre patients et personnel médical. Tandis que le module d'entretien avec personnel de santé recueille des renseignements sur les connaissances du personnel médical, l'objectif de ce module est de recueillir des informations sur ce que le personnel médical fait réellement avec les patients. 4 personnels de santé ont été observés pour le formulaire F3 (nouvelle consultation prénatale) et F5 (nouvelle consultation infantile), cependant 543 consultations prénatales (69%) et 545 consultations infantiles sur 784 ont été observées (70%). Dans le cas des patients de moins de cinq ans, les instruments sont axés sur le suivi des protocoles de « Prise en charge intégrée des maladies de l'enfant » (PCIME). Pour les clientes des consultations prénatales, les instruments ont examiné si les actions clés en CPN avaient été réalisées (y compris le counseling).
4. Questionnaires F4-F6- Entretien en sortie de CPN et des consultations < 5 ans. Un échantillon aléatoire systématique de 8 patients qui visitent l'établissement (4 patients âgés de moins de cinq ans et 4 patientes en consultations prénatales) a été interrogé afin d'évaluer la perception du patient sur la qualité des soins et leur satisfaction au sein des 195 IS. Ces questionnaires contiennent des informations sur le traitement et le conseil, le temps et dépenses, la satisfaction, la confiance et les informations générales et socio-économiques. Au total 543 femmes en consultations prénatales ont été interrogés soit 69% et 545 accompagnateurs d'enfants de moins de 5 ans, soit 70%.
Deviations from the Sample Design
Certaines IS ont été remplacées dans le Nord-Ouest en Déc. 2015 en raison de troubles politiques et des conditions météorologiques (crues). Dans le Centre également, il y a eu des problèmes pour atteindre quelques IS en raison de conditions météorologiques qui ont ainsi été remplaces. Dans deux ou trois cas, des IS ont dû être remplacées car elles n'étaient pas fonctionnelles/étaient fermées.
Response Rate
Etablissement de Santé: L’enquête sur les établissements de santé a été réalisée auprès de 196 établissements ciblés de l’étude. L’enquête sur les établissements de santé comprend plusieurs modules et s’étend de F1 à F7.
1. Questionnaires F1. 195 IS ont été interviewées, soit un taux de complétude de 99.4%. Les informations d’une IS ont fait défaut, notamment, un site de la banque mondiale, appartenant au groupe 2, dans le département du Centre. Les données de ce site ont été collectées mais ont été perdues en raison d’un problème de synchronisation des tablettes.
2. Questionnaire F2 et F7-Module des travailleurs de la santé. Un échantillon aléatoire stratifié de 4 travailleurs de la santé a été sélectionné dans chacun des 196 établissements résultant en un nombre total de 784 observations. Moins de 4 personnels de la santé ont été interrogés dans les établissements avec moins de personnels comme c’est le cas des dispensaires. Cependant, en raison du faible taux d’utilisation et malgré plusieurs sessions de repêchage, 542 personnels de santé ont été interviewés, soit 69% de l’échantillon de départ (784). Au niveau de F7, le questionnaire sur les agents de santé communautaire (ASC) , seulement 2 ASC par IS devaient être interroges, soit 388. En tout, 304 ASC ont été interrogés sur 388 soit un taux de 78%.
3. Questionnaire F3-F5-Observation de l’interaction entre patients et personnel médical. 4 personnels de santé ont été observés pour le formulaire F3 (nouvelle consultation prénatale) et F5 (nouvelle consultation infantile), cependant 543 consultations prénatales (69%) et 545 consultations infantiles sur 784 ont été observées (70%).
4. Questionnaires F4-F6- Entretien en sortie de CPN et des consultations < 5 ans. Un échantillon aléatoire systématique de 8 patients qui visitent l'établissement (4 patients âgés de moins de cinq ans et 4 patientes en consultations prénatales) a été interrogé afin d'évaluer la perception du patient sur la qualité des soins et leur satisfaction au sein des 195 IS. Au total 543 femmes en consultations prénatales ont été interrogés soit 69% et 545 accompagnateurs d’enfants de moins de 5 ans, soit 70%.
1. Questionnaires F1. 195 IS ont été interviewées, soit un taux de complétude de 99.4%. Les informations d’une IS ont fait défaut, notamment, un site de la banque mondiale, appartenant au groupe 2, dans le département du Centre. Les données de ce site ont été collectées mais ont été perdues en raison d’un problème de synchronisation des tablettes.
2. Questionnaire F2 et F7-Module des travailleurs de la santé. Un échantillon aléatoire stratifié de 4 travailleurs de la santé a été sélectionné dans chacun des 196 établissements résultant en un nombre total de 784 observations. Moins de 4 personnels de la santé ont été interrogés dans les établissements avec moins de personnels comme c’est le cas des dispensaires. Cependant, en raison du faible taux d’utilisation et malgré plusieurs sessions de repêchage, 542 personnels de santé ont été interviewés, soit 69% de l’échantillon de départ (784). Au niveau de F7, le questionnaire sur les agents de santé communautaire (ASC) , seulement 2 ASC par IS devaient être interroges, soit 388. En tout, 304 ASC ont été interrogés sur 388 soit un taux de 78%.
3. Questionnaire F3-F5-Observation de l’interaction entre patients et personnel médical. 4 personnels de santé ont été observés pour le formulaire F3 (nouvelle consultation prénatale) et F5 (nouvelle consultation infantile), cependant 543 consultations prénatales (69%) et 545 consultations infantiles sur 784 ont été observées (70%).
4. Questionnaires F4-F6- Entretien en sortie de CPN et des consultations < 5 ans. Un échantillon aléatoire systématique de 8 patients qui visitent l'établissement (4 patients âgés de moins de cinq ans et 4 patientes en consultations prénatales) a été interrogé afin d'évaluer la perception du patient sur la qualité des soins et leur satisfaction au sein des 195 IS. Au total 543 femmes en consultations prénatales ont été interrogés soit 69% et 545 accompagnateurs d’enfants de moins de 5 ans, soit 70%.
Data Collection
Dates of Data Collection
| Start | End |
|---|---|
| 2015-10-01 | 2016-04-01 |
Data Collection Mode
Face-to-face [f2f]
Supervision
Les enquêteurs et superviseurs ont été recrute par la MSH. Il y avait 54 enquêteurs et 4 superviseurs.
Les superviseurs étaient en charge de 13 à 14 enquêteurs de terrain.
Les superviseurs devaient s'assurer de la qualité des questionnaires mais aussi s'assurer que chaque questionnaire a bien été envoyé/synchronisé sur le serveur de manière quotidienne, vérifier que chacun des enquêteurs a fait son quota d'interviews, et s'occuper de repartir les équipes sur le terrain chaque jour. Ils étaient également en charge de rapport de suivi hebdomadaire sur la collecte des données. Dans plusieurs cas, il accompagnait les équipes d’enquêteurs ménages sur le terrain.
L’UC du MSPP s’est rendu sur le terrain 3-4 fois durant la collecte des données pour faire le suivi et la co-chercheuse principale avait un debriefing technique avec l’équipe de manière quotidienne pendant le premier mois et 2 fois par semaine par la suite. Il y avait également un suivi de la part du consultant de la banque mondiale qui appuyait Index Group dans la programmation.
Les superviseurs étaient en charge de 13 à 14 enquêteurs de terrain.
Les superviseurs devaient s'assurer de la qualité des questionnaires mais aussi s'assurer que chaque questionnaire a bien été envoyé/synchronisé sur le serveur de manière quotidienne, vérifier que chacun des enquêteurs a fait son quota d'interviews, et s'occuper de repartir les équipes sur le terrain chaque jour. Ils étaient également en charge de rapport de suivi hebdomadaire sur la collecte des données. Dans plusieurs cas, il accompagnait les équipes d’enquêteurs ménages sur le terrain.
L’UC du MSPP s’est rendu sur le terrain 3-4 fois durant la collecte des données pour faire le suivi et la co-chercheuse principale avait un debriefing technique avec l’équipe de manière quotidienne pendant le premier mois et 2 fois par semaine par la suite. Il y avait également un suivi de la part du consultant de la banque mondiale qui appuyait Index Group dans la programmation.
Data Collection Notes
Une formation de 2 semaines pour les enquêteurs eu lieu en Septembre 2015
Une interview a pris 45 min en moyenne pour l'enquête des ménages, 1 à 2h pour le questionnaire sur les IS (F1), 45 minutes avec le personnel médical (F2 et F7) et 30 minutes pour les entretiens de sorties (F5-F6)
Les interviews ont été menées en Français et/ou créole
Il y a eu un pilote de deux jours qui faisaient partie de la formation.
Il y a eu essentiellement des problèmes liés à la programmation des questionnaires et la firme locale, appuyé des consultants de la banque mondiale ont remédié aux problèmes notes après le pilote et pendant la collecte des données.
Une interview a pris 45 min en moyenne pour l'enquête des ménages, 1 à 2h pour le questionnaire sur les IS (F1), 45 minutes avec le personnel médical (F2 et F7) et 30 minutes pour les entretiens de sorties (F5-F6)
Les interviews ont été menées en Français et/ou créole
Il y a eu un pilote de deux jours qui faisaient partie de la formation.
Il y a eu essentiellement des problèmes liés à la programmation des questionnaires et la firme locale, appuyé des consultants de la banque mondiale ont remédié aux problèmes notes après le pilote et pendant la collecte des données.
Questionnaires
Questionnaires
Les questionnaires étaient disponibles en français et en créole.
Les questionnaires ont été adaptées d'étude d'impact précédentes. Ils prennent en considération le contexte haïtien.
Les questionnaires ont été revus par l’Unité de Contractualisation du Ministère de la Sante Publique et de la Population, la MSH et par les superviseurs de l'enquête.
L’enquête sur les établissements de santé comprend plusieurs modules et s’étend de F1 à F7.
Questionnaires F1. Questionnaire Institution Sanitaire. Le gestionnaire ou l’administrateur de l'institution de santé a été interviewé. Les enquêtes sur les établissements visent à recueillir des données sur les principaux aspects du fonctionnement des établissements ainsi que les aspects structurels de la qualité des soins.
Questionnaire F2 et F7-Module des travailleurs de la santé. Le questionnaires F2 s’adressait au personnel médical notamment aux infirmières, auxiliaires et médecines tandis que F7 s’adressait aux agents de santé communautaire (ASC). Les thèmes couverts par les questionnaires F2 et F7 comprennent les responsabilités, la rémunération, la satisfaction du personnel et l’état des connaissances.
Questionnaire F3-F5-Observation de l’interaction entre patients et personnel médical. 4 personnels de santé par IS ont été observés pour le formulaire F3 (nouvelle consultation prénatale) et F5 (nouvelle consultation infantile). Dans le cas des patients de moins de cinq ans, les instruments sont axés sur le suivi des protocoles de « Prise en charge intégrée des maladies de l'enfant » (PCIME). Pour les clientes des consultations prénatales, les instruments ont examiné si les actions clés en CPN avaient été réalisées (y compris le counseling).
Questionnaires F4-F6- Entretien en sortie de CPN et des consultations < 5 ans. Un échantillon aléatoire systématique de 8 patients qui visitent l'établissement (4 patients âgés de moins de cinq ans et 4 patientes en consultations prénatales) a été interrogé afin d'évaluer la perception du patient sur la qualité des soins et leur satisfaction au sein des 196 IS. Ces questionnaires contiennent des informations sur le traitement et le conseil, le temps et dépenses, la satisfaction, la confiance et les informations générales et socio-économiques.
Les questionnaires ont été adaptées d'étude d'impact précédentes. Ils prennent en considération le contexte haïtien.
Les questionnaires ont été revus par l’Unité de Contractualisation du Ministère de la Sante Publique et de la Population, la MSH et par les superviseurs de l'enquête.
L’enquête sur les établissements de santé comprend plusieurs modules et s’étend de F1 à F7.
Questionnaires F1. Questionnaire Institution Sanitaire. Le gestionnaire ou l’administrateur de l'institution de santé a été interviewé. Les enquêtes sur les établissements visent à recueillir des données sur les principaux aspects du fonctionnement des établissements ainsi que les aspects structurels de la qualité des soins.
Questionnaire F2 et F7-Module des travailleurs de la santé. Le questionnaires F2 s’adressait au personnel médical notamment aux infirmières, auxiliaires et médecines tandis que F7 s’adressait aux agents de santé communautaire (ASC). Les thèmes couverts par les questionnaires F2 et F7 comprennent les responsabilités, la rémunération, la satisfaction du personnel et l’état des connaissances.
Questionnaire F3-F5-Observation de l’interaction entre patients et personnel médical. 4 personnels de santé par IS ont été observés pour le formulaire F3 (nouvelle consultation prénatale) et F5 (nouvelle consultation infantile). Dans le cas des patients de moins de cinq ans, les instruments sont axés sur le suivi des protocoles de « Prise en charge intégrée des maladies de l'enfant » (PCIME). Pour les clientes des consultations prénatales, les instruments ont examiné si les actions clés en CPN avaient été réalisées (y compris le counseling).
Questionnaires F4-F6- Entretien en sortie de CPN et des consultations < 5 ans. Un échantillon aléatoire systématique de 8 patients qui visitent l'établissement (4 patients âgés de moins de cinq ans et 4 patientes en consultations prénatales) a été interrogé afin d'évaluer la perception du patient sur la qualité des soins et leur satisfaction au sein des 196 IS. Ces questionnaires contiennent des informations sur le traitement et le conseil, le temps et dépenses, la satisfaction, la confiance et les informations générales et socio-économiques.
Access policy
Contacts
| Name | Affiliation | |
|---|---|---|
| Damien de Walque | The World Bank | ddewalque@worldbank.org |
Citation requirements
Damien de Walque, Marion Cros, Dr. Johnny Calonges, Dr. Samuel Raymond. Banque Mondiale. Etude d'Impact sur le Financement Basé sur les Résultats (FBR), Enquête des Institutions de Santé - Etude de Base. 2016. Ref. HTI_2015_HRBFIE-FBL_v01_M. Downloaded from [URL] on [Date].
Disclaimer and copyrights
Disclaimer
The user of the data acknowledges that the original collector of the data, the authorized distributor of the data, and the relevant funding agency bear no responsibility for use of the data or for interpretations or inferences based upon such uses.
L'utilisateur des données reconnait que le producteur des données, le distributeur agréé, ainsi que les bailleurs de fonds ayant contribué au financement de la production de ces données, ne sont nullement responsables de l'utilisation qui sera faite de ces données, ni des interprétations et conclusions dérivées de leur analyse et utilisation.
L'utilisateur des données reconnait que le producteur des données, le distributeur agréé, ainsi que les bailleurs de fonds ayant contribué au financement de la production de ces données, ne sont nullement responsables de l'utilisation qui sera faite de ces données, ni des interprétations et conclusions dérivées de leur analyse et utilisation.
Copyright
2016, Banque Mondiale
Metadata production
DDI Document ID
DDI_HTI_2015_HRBFIE-FBL_v01_M_WB
Producers
| Name | Abbreviation | Affiliation | Role |
|---|---|---|---|
| Development Economics Data Group | DECDG | The World Bank | Documentation of the DDI |
Date of Metadata Production
2017-05-22
DDI Document version
Version 01 (May2017)