Awesome GitHub RepositoriesReal-Time Instance Segmentation

Yolact este un framework de viziune computerizată și un model de segmentare a instanțelor în timp real. Utilizează o rețea neuronală complet convoluțională pentru a detecta obiecte și a genera măști la nivel de pixel pentru imagini și fluxuri video. Sistemul folosește generarea de măști prototipice pentru a crea prototipuri globale de măști care sunt combinate liniar pentru rezultate specifice instanței. Încorporează straturi convoluționale deformabile și pooling de regiuni de interes (RoI) deformabile pentru a adapta eșantionarea spațială la formele neregulate ale obiectelor. Framework-ul acoperă întregul ciclu de viață al dezvoltării modelului, inclusiv antrenarea pe seturi de date personalizate, evaluarea acurateței folosind media Average Precision și utilizarea antrenării distribuite multi-GPU pentru a scala viteza de procesare. Oferă, de asemenea, utilitare de procesare media pentru aplicarea măștilor de segmentare pe imagini și exportul fișierelor video adnotate. Proiectul include instrumente de persistență a stării pentru gestionarea checkpoint-urilor și reluarea antrenării, alături de logare pentru înregistrarea metricilor și a valorilor de pierdere (loss).