3 Repos
Low-latency analysis and processing of sequential video frames.
Distinct from Real-Time Streaming: Focuses on the processing/analysis of visual frames rather than just the streaming I/O of the multimodal agent
Explore 3 awesome GitHub repositories matching artificial intelligence & ml · Visual Stream Processing. Refine with filters or upvote what's useful.
MODNet is a deep learning image segmenter and portrait matting model designed to isolate human subjects from backgrounds. It generates high-quality alpha mattes for images and video using only standard RGB input, removing the requirement for manual trimap guides. The framework is optimized for real-time inference and provides utilities to export pre-trained model weights into specialized formats for deployment on target hardware. The project covers the full workflow for portrait isolation, including supervised matting model training on labeled datasets, real-time video background removal, an
Analyzes video frames sequentially with low latency to maintain consistent subject isolation during playback.
OpenGlass ist ein Framework für KI-gestützte Smart Glasses und ein Mikrocontroller-Hardwareprojekt, das darauf ausgelegt ist, Standardbrillen in Wearables mit Computer-Vision-Funktionen zu verwandeln. Es bietet ein System zur Integration von Wearable-Kamerasensoren mit multimodaler KI, um visuelle Daten in Echtzeit zu verarbeiten. Das Projekt ermöglicht die Entwicklung KI-gestützter Brillen, die Personen und Objekte identifizieren, visuellen Text übersetzen und Lebensereignisse aufzeichnen können. Es verbindet handelsübliche elektronische Komponenten mit mobiler Software und Large Language Models für die visuelle Analyse. Das System deckt eine Reihe von Funktionen ab, einschließlich der Verarbeitung visueller Echtzeit-Streams und der Projektion auf ein Head-up-Display. Es nutzt eine Kombination aus mikrocontrollerbasierter Hardware-Schnittstellen, drahtlosen Befehlsprotokollen und mobiler App-Orchestrierung, um den Datenfluss zwischen dem Wearable und der cloudbasierten Vision-Inferenz zu verwalten.
Processes real-time visual streams from a wearable camera for immediate AI analysis.
This project is a web-based platform designed for benchmarking, visualizing, and evaluating computer vision algorithms focused on image feature extraction and matching. It provides a unified interface to compare the performance and accuracy of different models by processing image pairs or live video streams. The system distinguishes itself through a modular architecture that allows users to define custom processing pipelines and register external algorithms via configuration files. It incorporates geometric verification techniques to refine visual data and improve the precision of detected co
Performs low-latency analysis and feature matching on live video frames captured from connected webcams.