Awesome GitHub RepositoriesMulti-Cloud Data Aggregation

Steampipe is a cloud infrastructure query engine and API-to-SQL mapper that translates REST and GraphQL API responses into relational rows and columns. It allows for the retrieval and joining of real-time data from multiple cloud service providers using a relational database interface. The project functions as a PostgreSQL foreign data wrapper and an SQLite API extension, mapping external API endpoints to virtual tables. This enables the use of standard SQL to query live cloud services and aggregate data from different providers and service accounts into a single unified dataset. The system

CloudQuery is a cloud infrastructure ETL tool and multi-cloud data pipeline designed to collect, synchronize, and normalize resource metadata from various cloud providers and SaaS platforms. It functions as a centralized asset inventory manager and security posture manager, extracting configuration and state data into relational databases, data lakes, or data warehouses. The system distinguishes itself by transforming complex, nested cloud API responses into flat relational tables, enabling the use of standard SQL for asset querying and analysis. It employs a modular plugin system for data ex

Komiser هو مفتش للبنية التحتية متعددة السحابة ومدير لجرد الأصول. يوفر نظاماً مركزياً لتدقيق وفهرسة وتحليل الخدمات والأصول المنشورة عبر بيئات AWS وGCP وAzure. يحول المشروع مخططات الموارد المتباينة من بائعي سحابة مختلفين إلى تمثيل هيكلي موحد من خلال بنية إضافات (plugin) قائمة على المزود. ويستخدم فحص واجهة برمجة التطبيقات بدون وكيل (agentless) واكتشاف الموارد القائم على الاستطلاع لاسترجاع البيانات الوصفية وحالات التكوين دون الحاجة إلى وكلاء على الموارد المستهدفة. تغطي المنصة الإدارة المالية من خلال تجميع التكاليف وتحليل الإنفاق، وتدقيق الموارد لتحديد الأصول الخاملة أو غير الموسومة، وإدارة الوضع الأمني لاكتشاف الثغرات الأمنية وسوء تكوين البنية التحتية.