jankotek/MapDB
MapDB
MapDB هو محرك قاعدة بيانات مضمن ومكتبة مجموعات مدعومة بالقرص تخزن مجموعات Java على القرص أو خارج الذاكرة العشوائية (Off-heap). يعمل كمحرك معالجة بيانات محلي مصمم للتعامل مع مجموعات البيانات التي تتجاوز الذاكرة العشوائية المتاحة.
يستخدم المشروع تخزين البيانات خارج الذاكرة العشوائية للقضاء على عبء جمع القمامة ويستخدم التخزين المؤقت للقرص لموازنة استخدام الذاكرة والقرص. يوفر أدوات متخصصة لتصفية وتحليل كميات كبيرة من البيانات المحلية على جهاز واحد.
يضمن النظام سلامة البيانات من خلال معاملات متوافقة مع ACID والتحكم في التزامن متعدد الإصدارات. يدعم الخرائط والمجموعات والطوابير المستمرة باستخدام فهرسة B-tree وسجل معاملات تسلسلي للمتانة.
يمكن مراقبة سلوك النظام وعمليات المحرك الداخلية من خلال مستويات تسجيل وتنسيقات مخرجات قابلة للتكوين.
Features
- Disk-Backed Data Structures - Provides implementations of standard Java data structures that persist their state directly to the local filesystem.
- ACID Transactional Cores - Implements a core transactional engine that ensures atomic and durable data modifications via a sequential log.
- Persistent Mappings - Provides disk-backed key-value mappings and other collections that persist across application restarts.
- Disk-Persistent Data Structures - Maps collections like maps, sets, and queues directly to persistent storage to survive process restarts.
- Embedded Database Engines - Functions as a database engine integrated directly into application processes without requiring external server infrastructure.
- Multi-Version Concurrency Control - Utilizes multi-version concurrency control to allow simultaneous non-blocking read and write operations.
- ACID-Compliant - Ensures atomic, consistent, isolated, and durable operations with crash safety and rollback support.
- B-Tree - Uses B-Tree structures to organize stored data for efficient disk-based range queries and lookups.
- Off-Heap Memory Managers - Manages memory outside the JVM heap to eliminate garbage collection overhead for massive datasets.
- Hybrid Memory-Disk Caches - Employs a hybrid memory-disk cache that spills less active data to disk to optimize throughput.
- Disk Caching Systems - Offloads less frequently accessed data to persistent storage to manage memory constraints and maintain performance.
- Local Data Engines - Offers an engine designed for local data storage, indexing, and high-performance processing.
- Large Dataset Optimizations - Provides specialized utilities for high-performance filtering and analysis of massive local datasets.
- Databases and Storage - Embedded database engine backed by disk or memory.
- Embedded Databases - Concurrent collections backed by disk or off-heap memory.
