1 repository
Awesome GitHub RepositoriesFunction Result Caching
Disk-based caching systems that specifically store return values of functions based on input arguments.
Distinct from Disk Caching Systems: Focuses on memoizing function results based on input hashes, not just offloading large data for memory management.
Explore 1 awesome GitHub repository matching data & databases · Function Result Caching. Refine with filters or upvote what's useful.
Awesome Function Result Caching GitHub Repositories
Găsește cele mai bune repo-uri cu AI.Vom căuta cele mai potrivite repository-uri folosind AI.
- joblib/joblib
joblib/joblib
4,366Vezi pe GitHubJoblib este o suită de utilitare pentru paralelizarea sarcinilor de calcul și optimizarea stocării seturilor de date numerice mari și a rezultatelor funcțiilor. Acesta funcționează ca o bibliotecă de calcul paralel și un wrapper de multiprocesare care distribuie execuția funcțiilor pe mai multe nuclee CPU pentru a accelera sarcinile independente și buclele de calcul. Proiectul oferă un framework de caching pe disc care persistă output-urile funcțiilor costisitoare pe sistemul de fișiere, reevaluându-le doar atunci când argumentele de intrare se modifică. Se specializează în continuare în serializarea matricelor numerice mari, utilizând compresia eficientă și maparea memoriei pentru a optimiza stocarea și recuperarea seturilor de date masive. Toolkit-ul include capabilități pentru maparea funcțiilor paralele și utilizarea backend-urilor de execuție pluggable pentru a controla modul în care sarcinile sunt distribuite pe hardware-ul disponibil. Stratul său de stocare acoperă persistența obiectelor complexe și compresia transparentă pentru datele serializate.
Provides a framework for persisting expensive function outputs to the filesystem to avoid redundant computations.
Python
