1 dépôt
Utilities for transforming raw training logs and metrics into chronological performance figures.
Distinct from Training Evolution Visualizers: Focuses on plotting performance metrics from logs rather than animating the evolution of model outputs
Explore 1 awesome GitHub repository matching artificial intelligence & ml · Training Log Visualizers. Refine with filters or upvote what's useful.
Ce projet est un framework d'instruction tuning et un générateur de données synthétiques qui utilise des modèles enseignants haute capacité pour produire des paires instruction-réponse pour l'entraînement de modèles étudiants plus petits. Il fournit des jeux de données et des outils pour l'instruction tuning supervisé et l'apprentissage par renforcement à partir de feedback humain (RLHF). Le framework se spécialise dans le tuning inter-langues, offrant des exemples d'instruction-réponse de haute qualité en anglais et en chinois pour améliorer la généralisation du modèle à travers différents scripts. Il inclut un outil de modélisation de récompense pour créer des jeux de données de préférence et des évaluations comparatives utilisées pour entraîner des systèmes de récompense. Le projet couvre l'évaluation des modèles de langage via des benchmarks de préférence et des jeux de données d'instructions non naturelles, ainsi que la visualisation de l'entraînement pour transformer les logs bruts en graphiques de performance.
Generates performance figures and plots from extracted training data using a notebook-based workflow.