3 مستودعات
Mechanisms for saving and loading tabular data structures to ensure dataset consistency.
Distinct from Tabular Data Frameworks: Focuses on writing data to disk for preservation, while the parent is a general management framework.
Explore 3 awesome GitHub repositories matching data & databases · Data Persistence. Refine with filters or upvote what's useful.
This repository is a comprehensive collection of instructional guides and practical examples for Python development, focusing on machine learning, data science, and web scraping. It provides implementations for neural networks, reinforcement learning algorithms, and deep learning architectures using PyTorch, alongside detailed manuals for scientific computing and data visualization. The project distinguishes itself by offering specialized tutorials on concurrent programming to optimize CPU performance and guides for setting up Linux development environments. It covers the implementation of ad
Implements mechanisms for saving and loading datasets to disk to ensure data persistence.
AutoGluon is an automated machine learning framework and multimodal library designed to automate the end-to-end pipeline from data preprocessing to high-accuracy model training and validation. It functions as an automated model trainer for tabular, image, text, and time series data, as well as a tool for time series forecasting and foundation model finetuning. The project is distinguished by its ability to jointly process and fuse different data types, allowing for the construction of multimodal neural networks that integrate images, text, and structured tables. It supports zero-shot inferenc
Writes data frames to file paths using a consistent format to preserve datasets.
Go Spider هو إطار عمل معياري مصمم لبناء زواحف ويب متزامنة وسير عمل استخراج البيانات. يوفر محركاً منظماً لتنسيق مهام الزحف المؤتمتة، وإدارة جدولة الطلبات، ومعالجة محتوى الويب من خلال خط أنابيب موحد. يتميز إطار العمل ببنية قابلة للتهيئة بدرجة عالية تسمح للمطورين بحقن منطق مخصص للمنزلين، والمجدولات، ومكونات التخزين عبر عقود قائمة على الواجهات. وهو يدير تفاعلات الشبكة باستخدام خنق الطلبات القائم على البرمجيات الوسيطة (middleware) وإلغاء تكرار عناوين URL، مما يضمن بقاء عمليات الزحف فعالة ومحترمة لحمل الخادم. يغطي النظام دورة الحياة الكاملة لاستخراج البيانات، بما في ذلك تنفيذ المهام المتزامنة، والتحليل المؤتمت لتنسيقات المحتوى المختلفة، وتطبيع ترميز الأحرف. كما يوفر مراقبة مدمجة من خلال تسجيل التنفيذ والتتبع لتسهيل تصحيح الأخطاء وتحليل الأداء. يتم توزيع المشروع كمكتبة للغة البرمجة Go.
Routes processed data items to configurable outputs like console logs or local files.