27 repository-uri
Abstractions over native networking stacks for managing HTTP task lifecycles.
Distinguishing note: Focuses on wrapping native URL loading systems.
Explore 27 awesome GitHub repositories matching web development · HTTP Client Wrappers. Refine with filters or upvote what's useful.
Alamofire is an HTTP networking library that provides a foundation for managing network requests and responses through a chainable, type-safe interface. It serves as an asynchronous request manager, coordinating concurrent network operations and data streams while maintaining application responsiveness. The library distinguishes itself through a protocol-oriented request adaptation system, which utilizes interceptors to modify or authenticate requests before dispatch. It employs a middleware-driven pipeline to process traffic, handling encoding, authentication, and error recovery in a modular
Wraps the native networking stack to manage the lifecycle of HTTP tasks through a unified and extensible interface.
httpx is a suite of tools and libraries for HTTP reconnaissance, infrastructure discovery, and DNS resolution. It functions as a command line toolkit for extracting metadata and status codes from HTTP targets and CIDR ranges, as well as a Go library for integrating these probing capabilities into custom programs. The project distinguishes itself through specialized infrastructure profiling, using TLS fingerprinting to extract JARM hashes and certificate details. It identifies underlying components such as CDN usage, Autonomous System Numbers, and CNAMEs to map web server software and infrastr
Wraps the HTTP client with automated retry and backoff logic to navigate unstable network connections and firewalls.
Tenacity is a Python retry library and fault tolerance framework designed to automatically re-execute failing functions based on custom conditions, wait intervals, and stop criteria. It provides a mechanism to apply retry logic to both synchronous functions and asynchronous coroutines. The library implements exponential backoff to increase delays between retries, helping to manage transient network failures and prevent the overloading of services. Its capabilities cover the definition of retry conditions based on exception types or return values, as well as the enforcement of duration limits
Manages unstable API calls or database connections using exponential backoff and specific retry conditions.
pysheeet este o bibliotecă de referință tehnică ce oferă o colecție curatoriată de fragmente de cod și modele de implementare pentru dezvoltarea avansată în Python, integrarea sistemelor și calculul de înaltă performanță. Servește ca un ghid cuprinzător pentru implementarea programării de rețea de nivel scăzut, extensiilor native C și programării asincrone și concurente. Proiectul oferă framework-uri specializate pentru dezvoltarea și implementarea modelelor de limbaj mari, inclusiv instrumente pentru inferență distribuită pe GPU și servire de înaltă performanță. Include, de asemenea, modele detaliate pentru orchestrarea clusterelor de calcul de înaltă performanță, acoperind alocarea resurselor GPU și gestionarea sarcinilor de lucru pe mai multe noduri. Biblioteca acoperă o gamă largă de capabilități, inclusiv comunicarea securizată în rețea și criptografia, object-relational mapping și gestionarea bazelor de date, precum și implementarea structurilor de date și algoritmilor complecși. Oferă, de asemenea, utilitare pentru gestionarea memoriei, interoperabilitate nativă prin interfețe de funcții străine (FFI) și integrarea la nivel de sistem de operare.
Implements resilient request logic using timeout patterns and exponential backoff to handle transient failures.
This project is a Go client library and API wrapper for interacting with Elasticsearch clusters. It serves as a programmatic interface for managing documents, indices, and cluster health, allowing Go applications to perform search and indexing operations via the REST API. The library functions as a distributed search orchestrator, providing specialized tools for high-throughput data ingestion and cluster administration. It features a buffered bulk processor with exponential backoff retries for optimizing write performance and supports automated index lifecycle transitions and historical data
Re-enqueues failed bulk operations using an exponential backoff algorithm to handle transient server errors.
This project is a Go shell scripting library and framework designed for writing automation scripts and CLI tools. It provides a concurrent data pipeline system for chaining sources, filters, and sinks to process text and JSON streams. The library distinguishes itself through a comprehensive toolkit for shell-like operations, including a text processing engine for regular expression filtering and frequency analysis, a filesystem utility toolkit for recursive search and path manipulation, and an integrated HTTP client wrapper for building data pipelines that fetch web content. The capability s
Provides an HTTP client wrapper to fetch web content and integrate requests directly into scripting pipelines.
pydoll is a Chrome DevTools Protocol automation library and headless browser controller used for web data extraction and parallel browser automation. It controls Chromium-based browsers via direct WebSocket connections, allowing it to manage isolated browser contexts and tabs while bypassing the overhead and detection associated with WebDriver. The project features an anti-bot evasion framework that mimics natural human behavior, including mouse movements generated via Bezier curves and variable typing patterns. It provides specialized stealth capabilities to bypass behavioral analysis and au
Ships a function wrapper that handles execution exceptions using exponential backoff for unstable environments.
Boltons is a comprehensive utility toolkit and extension of the Python standard library. It provides a collection of reusable recipes and specialized data structures, system utilities, and helper libraries designed to support common programming tasks across various domains. The project is distinguished by a standard-library-only dependency model, ensuring maximum portability with zero external dependencies. It provides advanced implementations for data structures, such as immutable mappings and priority queues, alongside recursive data transformation tools for reshaping complex nested diction
Implements an exponential backoff retry mechanism to improve network service stability and prevent congestion.
Hatchet is an open-source durable workflow engine and task orchestration platform. It provides a framework for building and executing fault-tolerant, multi-step pipelines as directed acyclic graphs (DAGs), with automatic retries, scheduling, and real-time observability. The system is built around durable task checkpointing, which persists execution state after each step so work can resume from the last checkpoint after a worker crash or restart, and it supports event-driven task resumption that pauses a task until a matching external event arrives. The platform distinguishes itself through it
Implements exponential backoff for retrying failed tasks, increasing delay between retries to allow service recovery.
This is a tool for downloading videos, images, and audio from the Douyin social media platform using shareable URLs or profile links. It can download individual posts, entire user profiles including all posts and liked content, collections, and music tracks, with options for watermark-free and high-quality output. The tool also supports live stream recording, comment collection, and keyword-based content search with JSONL export. The project distinguishes itself through an integrated REST API server that accepts download and transcription requests, tracks job status, and exposes health check
Retries failed downloads with exponential backoff to improve reliability and reduce manual intervention.
Steel is a cloud browser automation platform that provides a REST API for launching and controlling remote Chrome browser sessions. It enables programmatic browsing and web scraping using standard automation tools like Puppeteer, Playwright, and Selenium, connecting to cloud-hosted browser instances via WebSocket and the Chrome DevTools Protocol. The platform supports both headless and headful browser sessions, with language-specific SDKs for TypeScript and Python. The service distinguishes itself through comprehensive anti-detection capabilities, including residential proxy rotation, CAPTCHA
Re-attempts failed browser operations with exponential backoff and jitter to handle transient errors gracefully.
JMComic-Crawler-Python is a high-performance asynchronous web scraper and API client designed to programmatically retrieve images and metadata from a comic hosting service. It functions as a media archiving tool for batch downloading albums and chapters, automating the process of saving content to a local filesystem. The project is distinguished by its ability to reverse server-side pixel obfuscation, using a decryption tool to reconstruct sliced and shuffled images. To maintain stable connectivity, it utilizes a network bypass utility featuring dynamic domain rotation and proxy routing to ci
Implements automated retry strategies and domain blacklisting to recover from network timeouts.
Faktory is an open-source work server that queues, dispatches, and manages background jobs across multiple programming languages. It stores job payloads as JSON hashes in a Redis-backed queue and provides language-specific client and worker libraries that enable any language to push jobs to the server or fetch and execute them. The server includes a batch workflow orchestrator that groups jobs into batches with completion tracking for coordinating multi-step asynchronous workflows. It features a configurable job uniqueness filter that prevents duplicate enqueues within a time window, an expon
Features an exponential backoff retry engine that automatically requeues failed jobs to handle transient errors.
Naabu is a port scanner library and tool that probes hosts for open ports using SYN, CONNECT, and UDP methods to identify active services. It functions as a Go library for embedding port scanning into programs, and as a standalone tool that accepts targets as hostnames, IP addresses, CIDR ranges, or ASN numbers. The tool discovers live hosts before scanning, filters ports by range or top lists, and can integrate with Nmap for service version detection. The project distinguishes itself through its SYN-based port probing approach that sends TCP SYN packets and analyzes responses without complet
Retries failed probes with backoff logic when encountering WAFs or other blocking mechanisms.
Web3.py este o bibliotecă Python care oferă o interfață cuprinzătoare pentru interacțiunea cu blockchain-ul Ethereum. Funcționează ca un client JSON-RPC, permițând aplicațiilor să se conecteze la noduri blockchain prin HTTP, WebSocket sau IPC pentru a citi starea rețelei și a trimite tranzacții. Biblioteca include o interfață dedicată pentru contracte inteligente care utilizează definiții Application Binary Interface (ABI) pentru a implementa contracte și a executa funcții on-chain. De asemenea, dispune de un toolkit de criptografie pentru semnarea tranzacțiilor și hashing-ul datelor cu Keccak, alături de utilitare pentru traducerea numelor de domenii Ethereum Name Service în adrese blockchain. Capabilitățile largi acoperă gestionarea tranzacțiilor și preluarea datelor blockchain, inclusiv capacitatea de a prelua headere de bloc, filtra log-urile de evenimente și converti unitățile valutare. Sistemul suportă gestionarea rețelei prin middleware de interceptare a cererilor, batching-ul apelurilor RPC și monitorizarea conexiunilor persistente pentru evenimente în timp real.
Executes automatic retries for network calls using customizable backoff strategies to handle instability.
Acest proiect este o traducere în chineză a unui ghid cuprinzător pentru limbajul de programare Go. Servește ca resursă educațională localizată și manual tehnic conceput pentru a oferi îndrumări privind sintaxa limbajului, designul și dezvoltarea software. Resursa acoperă o gamă largă de educație în limbajul Go, inclusiv implementarea modelelor de programare și designul de sistem. Include lecții traduse și exemple care se concentrează pe caracteristicile de bază ale limbajului, cum ar fi concurența și utilizarea interfețelor. Conținutul acoperă diverse domenii de capabilitate, inclusiv fundamentele limbajului, modelarea datelor, runtime reflection și gestionarea memoriei. De asemenea, oferă o acoperire detaliată a arhitecturii software, gestionarea erorilor, asigurarea calității și rețelistica web. Documentația este structurată ca un manual tehnic care conține conținut tradus, erate și corecții pentru a asigura o învățare precisă.
Provides implementation strategies for retrying failed operations using time intervals and exponential back-off.
This is a Go client library for interacting with the Slack API, providing a programmatic interface to manage channels, users, and workspace settings. It functions as a bot framework and event handler, allowing for the development of automated assistants that respond to workspace activities. The library includes a dedicated Block Kit builder for constructing complex UI layouts, such as interactive elements, data tables, and visualizations, for rich messaging. It also provides a full implementation for managing user authentication and identity verification through OAuth2 and OpenID Connect. Br
Provides built-in retry logic with exponential backoff to handle API rate limits and network instability.
req este o bibliotecă de client HTTP înlănțuibilă pentru Go, concepută pentru a simplifica configurarea cererilor și decodarea automată a răspunsurilor în structuri. Oferă un builder de cereri cu interfață fluentă care permite dezvoltatorilor să definească incremental proprietățile cererii și să încapsuleze logica HTTP în SDK-uri API reutilizabile. Proiectul se distinge printr-un emulator de amprentă TLS care imită semnăturile de rețea ale browserelor pentru a ocoli detectarea bot-urilor și filtrele crawlerelor. Include, de asemenea, un downloader de fișiere concurent care crește viteza de transfer prin preluarea fișierelor remote mari în segmente paralele. Biblioteca acoperă o suprafață largă de capabilități de rețea, inclusiv un pipeline de middleware pluggable pentru gestionarea centralizată a erorilor și telemetrie, gestionarea stării cookie-urilor și rotația automată a proxy-urilor. Suportă diverse scheme de autentificare, măsurarea detaliată a performanței rețelei și logica personalizabilă de reîncercare a cererilor. De asemenea, oferă utilitare pentru mock-ul răspunsurilor HTTP pentru a facilita testarea unitară fără servere la distanță.
Implements automated retry strategies and exponential backoff to handle network instability.
orpc is a contract-first API development framework for TypeScript that starts with a shared contract definition and generates type-safe clients and servers from that single source of truth. It guarantees end-to-end type safety, meaning inputs, outputs, errors, and streaming data are all checked at compile time across the client–server boundary. What distinguishes orpc from typical RPC frameworks is its ability to export contracts as OpenAPI specifications, to optimize server-side rendering by calling API handlers directly inside the server process, and to support real‑time bidirectional commu
Implements automatic retry with exponential backoff for failed client requests.
Acest proiect este o bibliotecă JavaScript de integrare pentru analytics și un colector de evenimente client-side, conceput pentru a înregistra comportamentul utilizatorilor și a distribui acele date către multiple destinații terțe printr-o interfață unificată. Funcționează ca o platformă de date despre clienți (CDP) care identifică utilizatorii, gestionează atributele și direcționează fluxurile de evenimente către diverse instrumente de analiză și depozite de date (data warehouses). Biblioteca se distinge printr-un router de evenimente multi-destinație și middleware de tracking HTTP care interceptează și modifică payload-urile evenimentelor înainte de transmisie. Implementează primitive de gestionare a identității pentru identificarea utilizatorilor, alierea identităților pentru combinarea profilurilor și tracking cross-subdomain prin stocarea identificatorilor pe domeniul principal. Sistemul acoperă o gamă largă de capabilități, inclusiv monitorizarea interacțiunii utilizatorilor pentru vizualizări de pagini, trimiteri de formulare și click-uri pe link-uri, precum și tracking-ul campaniilor de marketing prin extragerea parametrilor UTM. Pentru fiabilitate, utilizează batching-ul cererilor de evenimente, cozi de retry bazate pe stocarea locală cu backoff exponențial și flag-uri de tip keepalive în browser pentru a asigura capturarea datelor în timpul redirecționărilor de pagină. Biblioteca suportă, de asemenea, pixeli de tracking pentru medii care restricționează execuția JavaScript și oferă mecanisme pentru mascarea URL-urilor de integrare, prevenind astfel blocarea cererilor.
Persists failed network requests in the browser's local storage and attempts redelivery with exponential backoff.