1 مستودع
Awesome GitHub RepositoriesCloud Database ETL
Tools for extracting, transforming, and loading data between local memory and cloud-native databases.
Distinct from Vector Database ETL Tools: Distinct from Vector Database ETL: covers a broad range of AWS databases like DynamoDB, RDS, and Timestream, not just vector stores.
Explore 1 awesome GitHub repository matching data & databases · Cloud Database ETL. Refine with filters or upvote what's useful.
Awesome Cloud Database ETL GitHub Repositories
اعثر على أفضل المستودعات باستخدام الذكاء الاصطناعي.سنبحث عن أفضل المستودعات المطابقة باستخدام الذكاء الاصطناعي.
- awslabs/aws-data-wrangler
awslabs/aws-data-wrangler
4,107عرض على GitHubهذا المشروع هو مكتبة تكامل AWS pandas وإطار عمل لخط أنابيب البيانات مصمم لتبسيط حركة وتحويل البيانات بين الذاكرة المحلية وخدمات التخزين والتحليلات في AWS. يعمل كأداة لمستودع بيانات السحابة (data lake) ومدير ملفات التخزين، مما يسمح للمستخدمين بقراءة وكتابة وتحويل البيانات المنظمة عبر بيئات سحابية مختلفة. تتميز المكتبة كمنسق حوسبة موزع قادر على إدارة المجموعات في بيئات مثل EMR لمعالجة مجموعات البيانات التي تتجاوز حدود الذاكرة لجهاز واحد. كما توفر قدرات متخصصة لإدارة فهارس المتجهات وإجراء عمليات بحث التشابه داخل حاويات التخزين السحابية. تغطي مساحة قدراتها الأوسع ETL لقاعدة بيانات السحابة لخدمات مثل DynamoDB وRDS وTimestream، بالإضافة إلى إدارة كتالوج بيانات السحابة عبر AWS Glue. وتدعم تحليلات البيانات بدون خادم من خلال Athena وRedshift، وتوفر أدوات لإدارة كائنات S3، وفهرسة المستندات في OpenSearch، وتحليل سجلات CloudWatch.
Enables efficient movement of structured data between pandas and AWS databases including DynamoDB, RDS, and Timestream.
Python
