1 dépôt
Awesome GitHub RepositoriesFile-Based Data Engines
Systems that use SQL to directly process and query large-scale flat files as primary data sources.
Distinct from Parquet Readers: Differs from simple parsers or readers by providing a full SQL-based query engine over files.
Explore 1 awesome GitHub repository matching data & databases · File-Based Data Engines. Refine with filters or upvote what's useful.
Awesome File-Based Data Engines GitHub Repositories
Trouvez les meilleurs dépôts grâce à l'IA.Nous recherchons les dépôts les plus pertinents grâce à l'IA.
- cwida/duckdb
cwida/duckdb
38,822Voir sur GitHubDuckDB est une base de données SQL analytique embarquée et un système de gestion de base de données OLAP. Il fonctionne comme un moteur de données pour les fichiers Parquet et CSV, permettant aux utilisateurs d'exécuter des requêtes SQL complexes sur de grands jeux de données sans nécessiter de processus serveur séparé. Le système est conçu pour le traitement analytique local et les flux de travail de science des données embarqués. Il permet l'interrogation et l'analyse directes de fichiers Parquet et CSV depuis le disque, évitant ainsi de devoir charger les données dans une base de données permanente. Le moteur fournit une exécution SQL analytique haute performance, incluant la prise en charge des fonctions de fenêtrage et des sous-requêtes imbriquées. Il intègre une disposition de stockage en colonnes et une exécution de requêtes vectorisées pour gérer la manipulation et l'exploration de données à grande échelle. La base de données est accessible via une interface de ligne de commande autonome et des liaisons spécifiques aux langages Python, R, Java et Wasm.
Serves as a data engine that imports and queries large Parquet and CSV files directly using SQL.
C++
