Awesome GitHub RepositoriesRemote Data Streaming

Vaex is a high-performance Apache Arrow DataFrame library and out-of-core data processing engine designed to handle billion-row tabular datasets in Python. It functions as a lazy evaluation framework that defers computations and transformations until results are required, enabling the processing of datasets that exceed available system RAM by mapping files directly from disk. The project distinguishes itself as a tool for big data visualization and exploration, specifically integrated for use within interactive notebooks. It provides specialized capabilities for machine learning feature engin

Sofa-rpc es un framework de llamada a procedimiento remoto de alto rendimiento diseñado para construir aplicaciones Java distribuidas. Funciona como un kit de herramientas para gestionar un service mesh distribuido, proporcionando una capa de comunicación gRPC y un sistema para registrar y localizar instancias de servicios remotos. El framework cuenta con una capa de seguridad de red que implementa cifrado TLS y comprobaciones de autorización para proteger los datos transmitidos entre servicios. Utiliza una capa de protocolo conectable para admitir múltiples estándares de comunicación, asegurando una conectividad punto a punto flexible. La fiabilidad y la gestión del tráfico se manejan a través de disyuntores, balanceo de carga del lado del cliente y monitoreo de la salud del servicio. El sistema también incluye herramientas de observabilidad para el rastreo de solicitudes distribuidas y streaming remoto reactivo para aumentar la eficiencia de los recursos. El framework proporciona utilidades para la serialización de datos JSON y gestiona la conectividad remota a través de la agrupación de conexiones y un registro de descubrimiento de servicios.