2 个仓库
Awesome GitHub RepositoriesData API Integrations
Integrations specifically utilizing cloud-native data APIs for database interaction.
Distinct from AWS API Integrations: Distinct from AWS API Integrations: focuses on the data-plane API for SQL execution and ingestion rather than general service configuration.
Explore 2 awesome GitHub repositories matching devops & infrastructure · Data API Integrations. Refine with filters or upvote what's useful.
Awesome Data API Integrations GitHub Repositories
用 AI 发现最棒的仓库。我们将通过 AI 为您搜索最匹配的仓库。
- awslabs/aws-data-wrangler
awslabs/aws-data-wrangler
4,107在 GitHub 上查看该项目是一个 AWS pandas 集成库和数据流水线框架，旨在简化本地内存与 AWS 存储及分析服务之间的数据移动和转换。它作为一个云数据湖工具包和存储文件管理器，允许用户在各种云环境中读取、写入和转换结构化数据。 该库作为分布式计算编排器脱颖而出，能够在 EMR 等环境中管理集群，以处理超出单机内存限制的数据集。它还提供用于管理向量索引和在云存储桶内执行相似度搜索的专门功能。 其更广泛的功能面涵盖了针对 DynamoDB、RDS 和 Timestream 等服务的云数据库 ETL，以及通过 AWS Glue 进行的云数据目录管理。它支持通过 Athena 和 Redshift 进行无服务器数据分析，并提供用于管理 S3 对象、在 OpenSearch 中索引文档以及分析 CloudWatch 日志的实用程序。
Executes SQL queries and inserts data into database instances using a managed cloud data API.
Python - aws/aws-sdk-pandas
aws/aws-sdk-pandas
4,107在 GitHub 上查看aws-sdk-pandas 是一个 Python 库，将 pandas 数据帧与 AWS 服务集成，充当云数据 ETL 工具和数据湖连接器。它提供了一个统一界面，用于在内存中数据帧与云存储、数据库和数据仓库之间移动和转换数据。 该项目作为分布式计算编排器脱颖而出，能够将基于 pandas 的工作负载提交到 EMR 集群和无服务器处理环境。它进一步专门通过 Ray 集群初始化来协调分布式数据处理，以处理超出单机内存的数据集。 该库涵盖了广泛的功能，包括 S3 的对象存储管理、Athena 和 Redshift 的 SQL 查询执行，以及与 NoSQL、图和时间序列数据库的集成。它还包括通过 Glue 目录进行元数据管理、OpenSearch 数据索引以及在 QuickSight 中管理商业智能资产的实用程序。 其他功能包括检索密钥、分析 CloudWatch 日志以及管理数据质量规则集。
Provides a secure interface to execute SQL queries and insert data into relational databases using the RDS Data API.
Pythonamazon-athenaamazon-sagemaker-notebookapache-arrow
