Awesome GitHub RepositoriesMicrocontroller AI Frameworks

OpenGlass este un framework pentru ochelari inteligenți AI și un proiect hardware cu microcontrolere, conceput pentru a transforma ochelarii standard în dispozitive purtabile cu viziune computerizată. Oferă un sistem pentru integrarea senzorilor de cameră purtabili cu AI multimodal pentru a procesa datele vizuale în timp real. Proiectul permite dezvoltarea de ochelari cu AI care pot identifica persoane și obiecte, pot traduce text vizual și pot înregistra evenimente din viață. Conectează componente electronice standard la software mobil și modele de limbaj mari pentru analiză vizuală. Sistemul acoperă o gamă de capabilități, inclusiv procesarea fluxului vizual în timp real și proiecția pe head-up display. Utilizează o combinație de interfețe hardware bazate pe microcontrolere, protocoale de comandă wireless și orchestrare prin aplicații mobile pentru a gestiona fluxul de date între dispozitivul purtabil și inferența vizuală bazată pe cloud.

Mimiclaw is a framework for integrating large language models with microcontroller hardware to create interactive AI agents. It provides an embedded AI agent runtime and a tool-calling engine that allows language model loops to execute on embedded devices. The system acts as a bridge between language model APIs and physical hardware peripherals, enabling the control of sensors and actuators through natural language. The project features a dedicated manager for over-the-air firmware updates, allowing system images to be installed via web browsers or wireless networks to remove local toolchain