Awesome GitHub RepositoriesRemote Data Streaming

Vaex is a high-performance Apache Arrow DataFrame library and out-of-core data processing engine designed to handle billion-row tabular datasets in Python. It functions as a lazy evaluation framework that defers computations and transformations until results are required, enabling the processing of datasets that exceed available system RAM by mapping files directly from disk. The project distinguishes itself as a tool for big data visualization and exploration, specifically integrated for use within interactive notebooks. It provides specialized capabilities for machine learning feature engin

Sofa-rpc este un framework de remote procedure call (RPC) de înaltă performanță conceput pentru construirea de aplicații Java distribuite. Acesta funcționează ca un set de instrumente pentru gestionarea unui service mesh distribuit, oferind un strat de comunicare gRPC și un sistem pentru înregistrarea și localizarea instanțelor de servicii la distanță. Framework-ul dispune de un strat de securitate a rețelei care implementează criptarea TLS și verificări de autorizare pentru a proteja datele transmise între servicii. Utilizează un strat de protocol pluggable pentru a suporta mai multe standarde de comunicare, asigurând o conectivitate punct-la-punct flexibilă. Fiabilitatea și gestionarea traficului sunt asigurate prin circuit breakers, load balancing pe partea clientului și monitorizarea stării serviciilor. Sistemul include, de asemenea, instrumente de observabilitate pentru trasarea cererilor distribuite și streaming reactiv la distanță pentru a crește eficiența resurselor. Framework-ul oferă utilitare pentru serializarea datelor JSON și gestionează conectivitatea la distanță prin connection pooling și un registru de descoperire a serviciilor.