1 مستودع
Awesome GitHub RepositoriesCloud Data Ingestion Interfaces
Unified APIs for transferring structured data between memory and managed cloud services.
Distinct from Data Ingestion APIs: Existing candidates focus on narrow agent memory or metrics; this is for general cloud-native data frame ingestion.
Explore 1 awesome GitHub repository matching data & databases · Cloud Data Ingestion Interfaces. Refine with filters or upvote what's useful.
Awesome Cloud Data Ingestion Interfaces GitHub Repositories
اعثر على أفضل المستودعات باستخدام الذكاء الاصطناعي.سنبحث عن أفضل المستودعات المطابقة باستخدام الذكاء الاصطناعي.
- awslabs/aws-data-wrangler
awslabs/aws-data-wrangler
4,107عرض على GitHubهذا المشروع هو مكتبة تكامل AWS pandas وإطار عمل لخط أنابيب البيانات مصمم لتبسيط حركة وتحويل البيانات بين الذاكرة المحلية وخدمات التخزين والتحليلات في AWS. يعمل كأداة لمستودع بيانات السحابة (data lake) ومدير ملفات التخزين، مما يسمح للمستخدمين بقراءة وكتابة وتحويل البيانات المنظمة عبر بيئات سحابية مختلفة. تتميز المكتبة كمنسق حوسبة موزع قادر على إدارة المجموعات في بيئات مثل EMR لمعالجة مجموعات البيانات التي تتجاوز حدود الذاكرة لجهاز واحد. كما توفر قدرات متخصصة لإدارة فهارس المتجهات وإجراء عمليات بحث التشابه داخل حاويات التخزين السحابية. تغطي مساحة قدراتها الأوسع ETL لقاعدة بيانات السحابة لخدمات مثل DynamoDB وRDS وTimestream، بالإضافة إلى إدارة كتالوج بيانات السحابة عبر AWS Glue. وتدعم تحليلات البيانات بدون خادم من خلال Athena وRedshift، وتوفر أدوات لإدارة كائنات S3، وفهرسة المستندات في OpenSearch، وتحليل سجلات CloudWatch.
Provides a unified interface for transferring pandas data frames into various AWS managed services.
Python
