Awesome GitHub RepositoriesIntermediate Representations

Docling is a modular framework designed for document parsing, layout analysis, and structured data extraction. It transforms unstructured files and web content into a unified, hierarchical data model that preserves the spatial and semantic relationships between text, tables, images, and layout elements. By normalizing diverse input formats into a consistent internal representation, the library enables uniform processing across various document types. The project distinguishes itself through a schema-driven approach that maps document regions to strongly-typed objects, ensuring data accuracy t

This project is a diagram-as-code tool that transforms declarative text scripts into professional visual representations. It functions as a technical documentation generator, allowing users to define nodes, connections, and hierarchical relationships through a domain-specific modeling language that integrates directly into version-controlled developer workflows. The tool distinguishes itself through a highly modular architecture that decouples diagram definitions from spatial positioning. It features a pluggable layout engine that supports multiple arrangement algorithms, alongside a styling

DataX is a distributed data integration framework and plugin-based ETL tool designed for synchronizing large datasets between heterogeneous sources and destinations. It functions as a JDBC data migration engine and offline synchronization tool, enabling the movement of data between relational databases, NoSQL stores, and object storage. The system utilizes a plugin-based connector architecture that decouples reader and writer logic, allowing it to map and transform data types across different storage engines using a standardized internal representation. This design supports heterogeneous data

dbt-core is a command-line framework for transforming data within a warehouse using modular SQL and version control. It functions as a data transformation engine that enables users to define data structures and business logic through declarative configuration files, which the system then compiles into executable code. By managing complex data dependencies through a directed acyclic graph, it ensures that transformation tasks execute in the correct order while maintaining a manifest-driven state to track lineage and execution history. The project distinguishes itself through an adapter-based d

Clair is a container image vulnerability scanner and security analyzer. It performs static analysis of container images by matching package contents against vulnerability databases to identify security risks across different package formats and architectures. The project functions as both an image indexer and a vulnerability database manager. It processes container layers into intermediate representations to enable fast security lookups and synchronizes security metadata from multiple external sources to maintain a local registry. Capability areas include continuous security monitoring, whic

هذا المشروع عبارة عن أداة تحليل مكتوبة بـ Rust تلتقط وتحول وتصور مكدسات استدعاء الدوال لتحديد اختناقات أداء النظام. تعمل كمغلف لمحلل أخذ العينات يحول بيانات التحليل الخام إلى رسوم بيانية تفاعلية للهب (flamegraphs)، وهي خرائط هرمية لاستهلاك الموارد. توفر الأداة تكاملاً متخصصاً مع نظام بناء Rust لتحليل الملفات الثنائية ومعايير الأداء. كما تسمح بتكوينات تحليل مخصصة، مما يتيح للمستخدمين تجاوز أدوات تحليل النظام الافتراضية أو تسجيل الأعلام للتحكم في كيفية جمع البيانات. تدعم الأداة مراقبة أداء التطبيقات وتحليل التنفيذ الثنائي. ويمكنها التقاط بيانات الأداء عن طريق الإرفاق بمعرف عملية نشط لتحليل تطبيق قيد التشغيل دون الحاجة إلى إعادة تشغيل.

Poml is a prompt management framework and templating engine designed for authoring, versioning, and rendering structured prompts for large language models. It uses a semantic markup language to organize prompts into reusable templates, combining them with dynamic context and data to generate formatted inputs. The system distinguishes itself by decoupling core prompt logic from final presentation through a stylesheet-based approach. It provides a dedicated JSON schema output generator to enforce strict, machine-parsable model responses and a configuration interface for managing function tool s

Dokka هو محرك وثائق قابل للتوسيع مصمم لتوليد مواد مرجعية منظمة لواجهات برمجة التطبيقات (API) لمشاريع Kotlin. من خلال تحليل الكود المصدري والتعليقات، يعمل كمولد مواقع ثابتة يحول قواعد الكود إلى وثائق قابلة للقراءة. يندمج مباشرة في تدفقات عمل التطوير كإضافة لنظام البناء، مما يسمح بالإنشاء المؤتمت للمواد المرجعية أثناء عملية التجميع القياسية. يتميز المشروع بخط أنابيب معالجة معياري قائم على الإضافات يسمح للمطورين بتعديل سير عمل التوليد، وتخصيص تنسيقات المخرجات، وضبط التصميم المرئي. وهو يدعم هياكل المشاريع المعقدة من خلال تجميع الوثائق من مشاريع فرعية متعددة في مخرج واحد موحد. علاوة على ذلك، يتضمن محرك إسناد تبادلي يحل رموز الكود الداخلية ويربطها بوثائق المكتبات الخارجية، مما يضمن بقاء المواد المولدة متصلة وقابلة للتنقل. يوفر المحرك تحكماً واسعاً في المخرج النهائي، بما في ذلك القدرة على تصفية عناصر كود معينة، وتضمين أمثلة استخدام حية، والربط مباشرة بمستودعات الكود المصدري البعيدة. وهو يدعم تنسيقات مخرجات متعددة، مثل HTML، وMarkdown، وJavadoc، ويسمح بتخصيص عميق للقوالب والأصول لتلبية متطلبات العلامة التجارية أو الوثائق المحددة. تم تصميم الأداة ليتم استدعاؤها عبر واجهات سطر الأوامر أو من خلال تكاملات أدوات البناء الأصلية، مما يسهل استخدامها في خطوط أنابيب النشر المؤتمتة.