1 repositorio
Awesome GitHub RepositoriesFile-Based Data Engines
Systems that use SQL to directly process and query large-scale flat files as primary data sources.
Distinct from Parquet Readers: Differs from simple parsers or readers by providing a full SQL-based query engine over files.
Explore 1 awesome GitHub repository matching data & databases · File-Based Data Engines. Refine with filters or upvote what's useful.
Awesome File-Based Data Engines GitHub Repositories
Encuentra los mejores repositorios con IA.Buscaremos los repositorios que mejor coincidan usando IA.
- cwida/duckdb
cwida/duckdb
38,822Ver en GitHubDuckDB es una base de datos SQL analítica embebida y en proceso, y un sistema de gestión de bases de datos OLAP. Funciona como un motor de datos para archivos Parquet y CSV, permitiendo a los usuarios ejecutar consultas SQL complejas en grandes conjuntos de datos sin necesidad de un proceso de servidor independiente. El sistema está diseñado para el procesamiento analítico local y flujos de trabajo de ciencia de datos embebidos. Permite la consulta y el análisis directo de archivos Parquet y CSV desde el disco, evitando la necesidad de cargar datos en una base de datos permanente. El motor proporciona una ejecución SQL analítica de alto rendimiento, incluyendo soporte para funciones de ventana y subconsultas anidadas. Incorpora un diseño de almacenamiento en columnas y ejecución de consultas vectorizadas para manejar la manipulación y exploración de datos a gran escala. La base de datos es accesible a través de una interfaz de línea de comandos independiente y enlaces específicos de lenguaje para Python, R, Java y Wasm.
Serves as a data engine that imports and queries large Parquet and CSV files directly using SQL.
C++
