Awesome GitHub RepositoriesCherry-Picking

Ce projet est une ressource éducative complète et un guide pour apprendre le système de contrôle de version Git. Il sert de source de documentation technique pour un manuel qui explique les fondamentaux, les workflows avancés et l'architecture interne de Git. Le projet est structuré comme un e-book multi-format, avec des fichiers sources conçus pour être compilés dans divers formats de publication numérique, incluant HTML, PDF, EPUB et Mobi. Il utilise un pipeline de build dédié pour générer et valider ces documents. Le contenu couvre un large éventail de capacités de contrôle de version, incluant la manipulation de l'historique, l'administration de dépôt et l'intégration système. Il fournit des instructions guidées sur la gestion des workflows—tels que le branching, le merging et le rebasing—et analyse la mécanique interne du système de fichiers adressable par contenu et le versioning basé sur des instantanés.

lakeFS est un système de versioning de data lake qui fournit des branches et des commits de type Git pour de grands jeux de données stockés dans un stockage objet. Il fonctionne comme une couche de contrôle de version, permettant la création d'instantanés immuables, de commits atomiques et de branches zero-copy pour créer des environnements isolés pour l'expérimentation de données sans dupliquer les fichiers physiques. Le système sert de passerelle de stockage compatible S3 et de catalogue REST Iceberg, permettant aux protocoles de stockage cloud standard et aux clients compatibles de gérer des tables versionnées. Il agit comme un gardien de la qualité des données en utilisant un système de hooks piloté par événements pour valider les jeux de données par rapport aux politiques de gouvernance avant que les changements ne soient fusionnés en production. La plateforme couvre de larges capacités pour la gouvernance des données, incluant la collaboration via pull requests, le contrôle d'accès basé sur les rôles et le suivi de la lignée des données (data lineage). Elle fournit une intégration pour l'orchestration de workflows, les pipelines de machine learning et divers moteurs de calcul big data, prenant en charge la connectivité de stockage multi-cloud et la synchronisation d'identité via SSO et SCIM. Le logiciel peut être installé en utilisant des binaires, des conteneurs ou des charts Helm pour un déploiement sur Kubernetes.