1 dépôt
Deployment of background processes that remain active across the duration of a workflow execution.
Distinct from Long-Running Task Output Streams: Unlike the candidates which focus on API polling or mobile persistence, this is about lifecycle-bound infrastructure services for pipelines.
Explore 1 awesome GitHub repository matching devops & infrastructure · Persistent Background Services. Refine with filters or upvote what's useful.
Orchest est un orchestrateur de pipelines de données et un gestionnaire de flux de travail conteneurisés. Il fournit une plateforme pour concevoir, planifier et exécuter des séquences complexes de traitement de données via une combinaison d'interface graphique et de script. La plateforme se distingue par l'utilisation de conteneurs pour gérer les dépendances logicielles, garantissant une exécution cohérente dans différents environnements. Elle dispose d'un planificateur de tâches polyglotte capable de déclencher des jobs écrits dans plusieurs langages de programmation et inclut un système de contrôle de version qui suit les instantanés historiques des configurations de projet et du code. Le système couvre la conception visuelle de flux de travail et la cartographie des dépendances basée sur des graphes, ainsi que la planification de tâches déclenchées par le temps pour une exécution récurrente ou immédiate. Il prend également en charge le déploiement de services d'arrière-plan persistants qui restent actifs pendant toute la durée d'exécution d'un pipeline.
Launches persistent background services that remain active for the entire duration of a pipeline execution.