5 रिपॉजिटरी
Implementations of standard data structures that persist their state to the local filesystem.
Distinct from Disk-based: None of the candidates cover the general concept of mapping standard data structures (lists, sets, deques) to disk storage.
Explore 5 awesome GitHub repositories matching data & databases · Disk-Backed Data Structures. Refine with filters or upvote what's useful.
Beanstalkd is a distributed work queue server designed for asynchronous job processing. It functions as a standalone server that distributes background tasks between producers and consumers to improve application responsiveness and throughput. The system organizes tasks using numeric priority levels to ensure critical work is processed first. It manages the job lifecycle through discrete states and uses a simple line-based text protocol over TCP for communication. To ensure reliability, the server persists job data to a sequential disk log, allowing the queue state to be recovered after a sy
Implements a disk-backed storage mechanism for the work queue to ensure state recovery after system crashes.
This is an open-source, crowd-sourced wiki textbook that teaches Linux system programming in C. It covers the core operating system concepts of process management through the fork-exec-wait model, dynamic memory allocation using implicit free list heap allocators, inode-based file systems, inter-process communication via pipes and shared memory, POSIX threads with synchronization primitives, signal-based asynchronous notification, virtual memory with page table translation, and runtime diagnostics using Valgrind and GDB. The textbook distinguishes itself by providing practical, implementation
Describes RAID-1 mirroring as a fault-tolerance concept within the filesystem chapter.
MapDB एक एम्बेडेड डेटाबेस इंजन और डिस्क-बैक्ड कलेक्शन लाइब्रेरी है जो Java कलेक्शन को डिस्क या ऑफ-हीप पर स्टोर करती है। यह एक लोकल डेटा प्रोसेसिंग इंजन के रूप में कार्य करता है जिसे उन डेटासेट को संभालने के लिए डिज़ाइन किया गया है जो उपलब्ध फिजिकल RAM से अधिक हैं। यह प्रोजेक्ट गार्बेज कलेक्शन ओवरहेड को खत्म करने के लिए ऑफ-हीप डेटा स्टोरेज का उपयोग करता है और मेमोरी व डिस्क उपयोग को संतुलित करने के लिए डिस्क ओवरफ्लो कैशिंग को नियोजित करता है। यह एक ही मशीन पर बड़ी मात्रा में लोकल डेटा को फ़िल्टर और विश्लेषण करने के लिए विशेष उपयोगिताएं प्रदान करता है। सिस्टम ACID-अनुपालन लेनदेन और मल्टी-वर्जन कॉनकरेंसी कंट्रोल के माध्यम से डेटा अखंडता सुनिश्चित करता है। यह B-ट्री इंडेक्सिंग और स्थायित्व के लिए एक अनुक्रमिक लेनदेन लॉग का उपयोग करके पर्सिस्टेंट मैप, सेट और कतारों का समर्थन करता है।
Provides implementations of standard Java data structures that persist their state directly to the local filesystem.
Miniflare Cloudflare Workers के लिए एक स्थानीय सिम्युलेटर और एमुलेटर है। यह एक स्थानीय मशीन पर एक सर्वरलेस रनटाइम वातावरण प्रदान करता है, जो प्रोडक्शन क्लाउड वातावरण में परिनियोजित किए बिना फंक्शन्स और एज API के विकास और परीक्षण की अनुमति देता है। यह प्रोजेक्ट एज स्टोरेज प्रिमिटिव्स का एक स्थानीय सिमुलेशन लागू करता है, जिसमें की-वैल्यू स्टोर्स, ऑब्जेक्ट स्टोरेज और ड्यूरेबल ऑब्जेक्ट्स शामिल हैं। यह एक स्थानीय एकीकरण टेस्ट बेड को भी सक्षम बनाता है जहाँ सर्वरलेस फंक्शन्स को अलग-थलग सैंडबॉक्स के भीतर निष्पादित किया जाता है। टूलसेट एक व्यापक विकास सतह को कवर करता है, जिसमें फ़ाइल-सिस्टम मॉनिटरिंग के माध्यम से हॉट-रीलोडिंग, स्टोरेज बाइंडिंग्स के लिए स्थानीय स्टेट पर्सिस्टेंस और एनवायरनमेंट सीक्रेट्स का प्रबंधन शामिल है। यह टेस्ट केसेस के बीच डेटा रिसाव को रोकने के लिए स्टेट-आइसोलेटेड कंटेनरों के साथ स्वचालित एकीकरण परीक्षण का भी समर्थन करता है।
Implements standard data structures that persist their state to the local filesystem to maintain simulated edge storage across restarts.
This project is a disk-backed key-value store and persistent data structure library for Python. It provides a mechanism for persisting mappings, sets, and queues to the local filesystem to bypass memory limitations and cache expensive function results across threads and processes. The system serves as a cross-process synchronization tool, offering distributed locks, semaphores, and barriers to coordinate shared resource access. It implements advanced caching strategies such as probabilistic stampede prevention, sharded data partitioning to increase throughput, and least-recently-used eviction
Maintains sorted lists, sets, and double-ended queues on the filesystem for permanent storage and fast retrieval.