Awesome GitHub RepositoriesNode Affinity Controls

SwanLab ist eine Open-Source-Plattform für das Tracking von Machine-Learning-Experimenten und ein Observability-Tool. Es bietet ein zentrales Dashboard zum Protokollieren von Trainingsmetriken, Hyperparametern und Hardware-Performance, um das Training von KI-Modellen zu überwachen und zu analysieren. Die Plattform zeichnet sich durch ihren Fokus auf selbst gehostete Infrastruktur aus, die es Benutzern ermöglicht, private Instanzen via Docker oder Kubernetes für eine sichere On-Premises-Datenkontrolle bereitzustellen. Sie enthält zudem spezialisierte Dienstprogramme zur Migration historischer Experiment-Logs und zur Synchronisierung von Echtzeit-Metriken aus externen Tools wie MLflow. Das System deckt ein breites Spektrum an Funktionen ab, einschließlich Multi-Modal-Media-Logging für 3D-Punktwolken und audiovisuelle Assets, Echtzeit-Hardware-Monitoring für GPUs und CPUs sowie vergleichende Analysen durch Side-by-Side-Visualisierungen von Runs. Es unterstützt das Tracking von verteiltem Training über Multi-GPU-Cluster und lässt sich in Frameworks wie PyTorch Lightning, Ray, XGBoost und LightGBM integrieren. Die administrative Verwaltung erfolgt über eine Kombination aus webbasiertem Dashboard und einer Command-Line-Interface (CLI) zur Verwaltung von Workspaces, Projekten und Benutzerberechtigungen.