2 مستودعات
Tools for processing large volumes of data in sequential groups to optimize throughput and resource usage.
Distinct from Batch Processing: Closest candidates are either cloud-specific or limited to audio processing; this is a general utility for sequential thread iteration.
Explore 2 awesome GitHub repositories matching data & databases · Batch Processing Utilities. Refine with filters or upvote what's useful.
Hardseed is a command-line forum media scraper and content archiver. It extracts images and torrent seeds from internet forums in bulk, saving the media and associated metadata to local directories. The tool utilizes a proxy-enabled web scraping engine that rotates network traffic through multiple proxy servers and protocols to bypass rate limits and network restrictions. It includes a keyword-based media filter that matches user-defined strings within entry titles to include or exclude specific topics. The system manages data extraction through batch-processed thread iteration and range-lim
Processes forum entries in sequenced groups to extract media without overloading the source server.
spotifytoytmusic هي أداة ترحيل مكتبة موسيقى مصممة لنقل قوائم التشغيل والأغاني المفضلة من Spotify إلى YouTube Music. تعمل كأداة مزامنة عبر المنصات تعيد إنشاء مكتبات الموسيقى عن طريق مطابقة بيانات الأغاني الوصفية وعناوينها بين مزودي البث. توفر الأداة إمكانيات لترحيل قوائم التشغيل بالكامل ونقل الأغاني المفضلة، مما يضمن إعادة بناء المجموعات المنسقة على الخدمة المستهدفة. كما تعمل كأداة نسخ احتياطي، مما يسمح للمستخدمين بتصدير بيانات الموسيقى الوصفية ومحتويات قوائم التشغيل إلى ملفات محلية لمنع فقدان البيانات أثناء تغيير المزود. يدير النظام عمليات النقل هذه من خلال تكاملات REST API ومصادقة OAuth2 للوصول إلى حسابات المستخدمين وتعديلها بشكل آمن. يستخدم مطابقة المسارات القائمة على البيانات الوصفية لتحديد الأغاني ويستخدم معالجة الدفعات التسلسلية للتعامل مع المجموعات الكبيرة.
Processes large track collections in sequential groups to avoid hitting API rate limits.