Awesome GitHub RepositoriesControlNet Preprocessing

Ce projet est une suite de préprocesseurs ComfyUI ControlNet et une boîte à outils d'analyse de vision par ordinateur. Il fonctionne comme un préprocesseur d'image pour stable diffusion qui extrait des indices structurels des images pour guider les flux de travail de diffusion latente. Le système fournit des modèles spécialisés pour l'estimation de la pose humaine, y compris les points clés squelettiques et les maillages faciaux, ainsi que le mapping de scènes 3D par l'estimation de la profondeur et des normales de surface. Il inclut également des outils pour le contrôle du mouvement vidéo par IA à l'aide de l'analyse du flux optique. La surface de capacités plus large couvre l'analyse structurelle d'image — telle que l'art linéaire, l'extraction de contours et la segmentation sémantique — ainsi que l'isolation de la luminance et la génération d'indices de couleur et de style. Ces processus sont soutenus par des runtimes accélérés par le matériel et la mise en cache des points de contrôle de modèles pour réduire la latence d'inférence.