Prefect — Orchestration des workflows

Prefect 3.3.2 est la couche d’orchestration de tous les workflows d’ingestion et de transformation de données. Il planifie, surveille et relance les pipelines qui alimentent l’entrepôt de données à partir des systèmes sources de santé du Rwanda.

Ingestion des sources de santéIngère les données de HMIS, IDSR, eFICHE, HIV Tracker, Immunization et Cancer Registry.

Transformations dbtDéclenche les exécutions de transformation dbt après chaque ingestion pour maintenir l’entrepôt à jour.

Rapports automatisésGénère le bulletin IDSR et la newsletter Intelligence de Santé du Rwanda selon un calendrier défini.

Soumission de jobs SparkSoumet des jobs Spark distribués via l’API REST de Livy dans le cadre de pipelines plus larges.

Référence rapide

Attribut	Valeur
Version	Prefect 3.3.2
Python	3.11
Pool de travail	default
Fichier de configuration	`apps/analytics/prefect/.prefect/prefect.yaml`
Racine des workflows	`apps/analytics/prefect/.prefect/workflows/`
Fuseau horaire	Africa/Kigali