1 Repo
Awesome GitHub RepositoriesDistributed SQL Loading
Mechanisms for importing cleaned data files into distributed SQL engines using predefined schemas.
Distinct from Schema Column Mapping: Focuses on the bulk loading process into distributed SQL engines rather than just the logical mapping of columns.
Explore 1 awesome GitHub repository matching data & databases · Distributed SQL Loading. Refine with filters or upvote what's useful.
Awesome Distributed SQL Loading GitHub Repositories
Finde die besten Repos mit KI.Wir suchen mit KI nach den am besten passenden Repositories.
- turboway/bigdata_analyse
TurboWay/bigdata_analyse
5,238Auf GitHub ansehenDieses Projekt ist eine Sammlung von Big-Data-Frameworks und Pipelines, darunter ein Apache Hive-Analyse-Framework, eine Plattform für Verhaltensdatenanalyse, eine Predictive-Analytics-Engine und Echtzeit-Datenpipelines. Es bietet die Infrastruktur für den Aufbau von ETL-Workflows (Extract, Transform, Load), um große Datensätze für verteilte Speicherung und SQL-basierte Analysen zu verarbeiten. Das System unterstützt diverse analytische Implementierungen, wie eine Predictive-Engine mittels linearer Regression für Prognosen und eine Echtzeit-Architektur, die Daten über Message-Broker für sofortiges Reporting weiterleitet. Es enthält spezialisierte Funktionen für die Analyse von Nutzerverhalten, E-Commerce-Performance-Messungen und Daten des städtischen Nahverkehrs. Die Codebasis deckt ein breites Spektrum an Data Engineering und Analyse ab, einschließlich Datenbereinigung und -transformation, verteilter Datenaufnahme (Ingestion), fensterbasierter Stream-Verarbeitung und der Visualisierung von Ergebnissen durch Business-Intelligence-Tools. Zudem ermöglicht es die Berechnung spezifischer Geschäftskennzahlen wie Konversionsraten, Monetarisierungs-Performance und Nutzer-Engagement-Level.
Imports cleaned CSV files into a distributed SQL engine by mapping source columns to predefined table schemas.
Pythonhqlpythonsql
