Awesome GitHub RepositoriesDevelopment Scaffolding

StreamPark est une plateforme de gestion centralisée conçue pour coordonner le déploiement, la surveillance et le cycle de vie opérationnel des applications de traitement de flux distribué et de batch. Il fonctionne comme un plan de contrôle et un orchestrateur pour les pipelines de données, fournissant spécifiquement des capacités de gestion pour les environnements Apache Flink et Hadoop YARN. La plateforme se distingue par une approche low-code du déploiement de tâches et un adaptateur d'exécution multi-moteur qui prend en charge divers runtimes de traitement. Elle facilite la gestion des pipelines de données en temps réel en combinant l'analytique SQL en streaming avec un pipeline de déploiement basé sur les ressources qui gère le versioning, les uploads de binaires et la récupération d'état basée sur des savepoints. Le système couvre un large ensemble de capacités incluant l'orchestration de jobs distribués, l'intégration de données en temps réel via des connecteurs pré-construits et l'intégration d'identité via LDAP ou SSO. Il fournit également des outils d'observabilité pour la surveillance des applications à la seconde près et des notifications opérationnelles automatisées en cas de panne.