Évaluation du chatbot WAZZII — santé numérique et intelligence artificielle, programmes MSD 4.0, Tukisonga 2.0 et AI Mobiliser (Kenya)

Appel à propositions — Évaluation du chatbot WAZZII

Évaluation santé numérique et IA, Kenya — Girl Effect Kenya
Date de publication : 14 octobre 2026

Synthèse de la procédure

• Intitulé : évaluation du chatbot WAZZII dans trois programmes au Kenya
• Type de mise en concurrence : appel d’offres ouvert
• Type de prestataire : agence indépendante de recherche ou d’évaluation
• Programmes concernés : MSD 4.0, Tukisonga 2.0 et AI Mobiliser
• Zone géographique : comtés de Nairobi et de Nakuru, ainsi que les données numériques et de services approuvées
• Périmètre : conception de l’évaluation, analyse des données d’usage du produit, tests de performance et de sécurité de l’IA, recherche utilisateurs, analyse des parcours vers les services et rédaction des rapports
• Échéance de réalisation : tous les livrables finaux achevés au 31 décembre 2026
• Date limite des questions : 19 octobre 2026
• Date limite de dépôt des propositions : 26 octobre 2026
• Courriel de dépôt : suppliers@girleffect.org
• Validité des offres : 90 jours

Qui sommes-nous

Girl Effect est une organisation internationale à but non lucratif qui conçoit des médias et des technologies que les filles souhaitent utiliser, auxquels elles font confiance et dont elles ont besoin. Elle s’appuie sur la conception centrée sur les jeunes et sur des approches de changement de comportement pour aider les adolescentes et les jeunes femmes à accéder à des informations, des services et un accompagnement fiables, et à faire des choix éclairés sur leur santé et leur avenir.

Contexte

Girl Effect met en œuvre au Kenya trois programmes qui utilisent WAZZII, son chatbot, en complément de contenus multimédias, de l’engagement communautaire et de liens avec les services, afin d’améliorer l’accès à l’information et aux services de santé sexuelle et reproductive (SSR) et de santé maternelle et néonatale (SMN) :

• MSD 4.0 : Nairobi et Nakuru, santé maternelle et néonatale ;
• Tukisonga 2.0 : Nairobi et Nakuru, SSR des adolescentes et jeunes femmes de 15 à 24 ans (contraception, DMPA-SC/auto-injection, saignements menstruels abondants, IST) ;
• AI Mobiliser : Nairobi, information et accompagnement en SSR appuyés par l’IA pour faciliter la prise de décision éclairée et l’accès aux services de contraception.

Girl Effect recherche un partenaire de recherche indépendant pour évaluer WAZZII dans ces trois programmes : expérience utilisateur, performance et sécurité de l’IA, résultats comportementaux, équité et progression de l’engagement numérique vers l’utilisation des services.

Objet et objectifs de l’évaluation

L’évaluation appréciera la performance, l’utilité et la sécurité de WAZZII, ainsi que sa contribution aux résultats SSR/SMN et aux parcours vers les services. Elle devra notamment :

• mesurer la portée, l’engagement, l’usage répété et l’expérience utilisateur ;
• évaluer l’exactitude, la fiabilité, la confiance, la sécurité de l’IA et sa gestion des situations sensibles ou à risque ;
• examiner les liens entre l’usage du chatbot et les connaissances, la confiance en soi, les intentions et la recherche de services ;
• analyser les orientations, les orientations abouties et l’utilisation effective des services ;
• identifier les écarts d’accès et de résultats entre groupes d’utilisatrices ;
• formuler des recommandations pour améliorer la performance du produit, la protection, les liens avec les services et l’efficience.

Prestations attendues

Conception de l’évaluation et analyse des données

Élaborer un protocole d’évaluation, un cadre d’indicateurs, une stratégie d’échantillonnage et un plan d’analyse. Analyser les données d’usage du chatbot (profil des utilisatrices, engagement, usage répété, schémas de conversation, points d’abandon). Cartographier le parcours entre l’exposition au programme, l’engagement avec le chatbot, l’accompagnement humain, l’orientation et l’utilisation des services. Croiser les données de la plateforme, des enquêtes, de la recherche qualitative et les données d’orientation/de services disponibles ; suivre les utilisatrices dans le temps lorsque c’est possible ; documenter clairement les lacunes de données, les biais de sélection et les limites d’attribution.

Performance de l’IA, sécurité et expérience utilisateur

• Évaluer l’exactitude, la fiabilité, la pertinence, la compréhension, l’accessibilité, la confidentialité et la confiance. Pour AI Mobiliser, réaliser des tests structurés sur des questions SSR représentatives (contraception, DMPA-SC/auto-injection, révélations sensibles, risques de désinformation, informations d’orientation).
• Examiner le suivi de performance de l’IA, les alertes de protection, les registres de défaillances et les processus d’escalade ; vérifier que les réponses inappropriées et les situations à risque sont détectées et gérées correctement ; appliquer le cas échéant la grille d’évaluation produit existante à 22 indicateurs.
• Recourir à des enquêtes, entretiens ou séances d’utilisabilité pour identifier les obstacles et les pistes d’amélioration.

Équité et accès numérique

• Déterminer si les utilisatrices ayant différents niveaux d’accès numérique peuvent utiliser WAZZII et en bénéficier (téléphone partagé, connectivité, littératie numérique, confidentialité, langue, handicap, géographie).
• Analyser les écarts d’engagement, d’expérience, d’orientation et de résultats selon les caractéristiques pertinentes, et l’articulation entre chatbot, multimédia, mobilisation communautaire et accompagnement humain, notamment dans AI Mobiliser.

Résultats comportementaux et parcours vers les services

• Mesurer les connaissances, la confiance, la prise de décision, les intentions et la recherche de services déclarées.
• Pour AI Mobiliser, analyser la progression dans le parcours de soins contraceptifs (orientations proposées, consultations réalisées, utilisation des services), en s’appuyant sur des codes d’orientation, registres des prestataires, bons échangés ou autres méthodes de vérification approuvées.
• Distinguer clairement l’utilisation vérifiée de l’utilisation déclarée ; toute conclusion sur l’efficacité doit être étayée par le dispositif d’évaluation, les associations ne devant pas être interprétées automatiquement comme des effets causaux.

Analyse et recommandations

Trianguler les résultats issus des données d’usage, des tests de l’IA, de la recherche utilisateurs et des données de services, et identifier les améliorations prioritaires en matière de sécurité de l’IA, de conception du produit, d’accessibilité, de systèmes d’orientation et de mise en œuvre.

Livrables

• Rapport de démarrage, protocole d’évaluation et cadre d’indicateurs ;
• revue des données d’usage et cartographie du parcours utilisateur, lacunes de données comprises ;
• outils de recherche utilisateurs et cadre d’évaluation de la performance et de la sécurité de l’IA ;
• approbations éthiques et autorisations de recherche requises ;
• jeux de données nettoyés et anonymisés, dictionnaires de codes et scripts d’analyse ;
• rapports d’évaluation provisoire et final ;
• recommandations hiérarchisées et présentation des résultats à Girl Effect.

Durée et pilotage

Tous les livrables finaux doivent être achevés et acceptés au plus tard le 31 décembre 2026. L’agence rendra compte au point focal Données probantes et analyses de Girl Effect et travaillera étroitement avec les équipes produit, programmes, protection, opérations et pays. Tout risque pesant sur le périmètre, la qualité, le budget ou l’échéance doit être signalé immédiatement avec un plan d’atténuation.

Profil recherché

• Expérience en évaluation de la santé numérique ou de l’IA, méthodes mixtes, tests d’utilisabilité, analyse de données numériques, évaluation de la sécurité de l’IA, SSR/SMN, protection et éthique de la recherche.
• Expérience de recherche au Kenya et de mesure des orientations et de l’utilisation des services indispensable.

Dossier de soumission

Propositions technique et financière distinctes. La proposition technique ne doit pas dépasser 10 pages (CV, références et pièces justificatives compris) et doit présenter : le dispositif d’évaluation, l’échantillonnage et l’analyse ; les méthodes de test de performance et de sécurité de l’IA ; les méthodes de mesure de l’expérience utilisateur et de l’utilisation des services ; l’éthique, la protection, la confidentialité, la sécurité et la gouvernance des données ; la composition et l’expérience de l’équipe ; un plan de travail détaillé jusqu’au 31 décembre 2026 ; trois missions comparables et trois références clients joignables.

La proposition financière, en shillings kényans, comprend un budget forfaitaire détaillé par phase et par livrable, les rôles, tarifs et charges de travail du personnel, les taxes et frais remboursables présentés séparément, ainsi que les hypothèses et conditions. Les prix doivent rester valables 90 jours.

Critères d’évaluation

• Compréhension de WAZZII, du programme et des exigences de l’évaluation : 10 %
• Dispositif d’évaluation, échantillonnage, résultats et méthodologie des parcours vers les services : 15 %
• Analyse des données produit, performance de l’IA et approche des tests de sécurité : 15 %
• Expérience utilisateur, équité, éthique, protection et protection des données : 10 %
• Expérience pertinente de l’organisation et références : 10 %
• Capacités de l’équipe et faisabilité du plan de travail : 10 %
• Total technique : 70 % — proposition financière et rapport qualité-prix : 30 %

Girl Effect peut demander des clarifications écrites, une présentation méthodologique, des entretiens avec le personnel clé, des vérifications de références ou une offre finale améliorée. L’offre la moins chère ne sera pas nécessairement retenue.

Calendrier

• Publication des termes de référence : 14 octobre 2026
• Date limite des questions : 19 octobre 2026
• Date limite de dépôt des propositions : 26 octobre 2026

Les offres tardives ou non conformes pourront ne pas être évaluées. Seuls les soumissionnaires retenus seront contactés.

Conditions générales

Le prestataire retenu signera le contrat type de Girl Effect ; les paiements sont liés à la livraison et à l’acceptation écrite des jalons. Girl Effect sera propriétaire des outils, jeux de données, rapports et autres productions. Les conversations du chatbot, données personnelles et documents confidentiels ne doivent pas être chargés dans des outils d’IA publics ou tiers sans autorisation écrite préalable. Le prestataire doit respecter les protocoles de recherche et de protection, déclarer tout conflit d’intérêts et reste responsable de ses partenaires et sous-traitants. Girl Effect se réserve le droit d’annuler la procédure, de rejeter tout ou partie des offres ou d’attribuer tout ou partie du marché.

Comment postuler

Envoyer les propositions technique et financière en pièces jointes distinctes à suppliers@girleffect.org avant le 26 octobre 2026.