spotify/basic-pitch
Basic Pitch
Basic-pitch est un transcripteur audio de réseau neuronal et un détecteur de hauteur polyphonique. Il fonctionne comme un convertisseur audio-vers-MIDI qui transforme les enregistrements audio polyphoniques en événements de note MIDI et en données de pitch bend.
Le système préserve l'expression musicale en suivant les fluctuations de fréquence continues pour convertir les glissandos et le vibrato en événements de pitch bend MIDI. Il utilise un moteur d'inférence enfichable qui permet de configurer l'exécution du modèle en fonction du système d'exploitation ou des besoins d'accélération matérielle.
Le projet fournit une interface de ligne de commande pour le traitement audio par lots et une interface programmatique pour intégrer la transcription et l'extraction d'événements de note dans un logiciel personnalisé. Les résultats de transcription peuvent être exportés sous forme de fichiers MIDI, de sorties de modèle brutes et de feuilles de calcul d'événements de note.
Features
- Audio Transcription Models - Uses a deep learning model to detect multiple simultaneous musical pitches from raw audio waveforms.
- Automated Music Transcription - Uses neural networks to programmatically turn audio files into MIDI data and note events.
- Neural Audio Transcribers - Uses a machine learning system to detect musical pitches in audio files to automate the transcription process.
- AI Audio Analysis - Processes audio data using AI to extract multiple simultaneous musical notes for transcription.
- Audio-to-MIDI Converters - Transforms polyphonic audio recordings into MIDI note events and pitch bend data using neural networks.
- Audio-to-MIDI Pipelines - Implements a pipeline that sequentially processes raw audio through a neural network to produce MIDI files.
- Audio-to-MIDI Transcription - Converts polyphonic audio recordings into MIDI files to capture notes and pitch bends for music production.
- Pitch Bend Detection - Tracks continuous frequency fluctuations to convert glides and vibrato into MIDI pitch bend events.
- Polyphonic Audio-to-MIDI Transcription - Transforms polyphonic audio files into MIDI format with pitch bend detection to preserve musical expression.
- Polyphonic Pitch Detectors - Identifies multiple simultaneous notes and frequency changes within an audio signal.
- Polyphonic Pitch Tracking - Analyzes complex audio signals to separate and identify individual overlapping notes across a wide frequency range.
- CLI Transcription Tools - Provides a command-line tool for transcribing audio files directly into MIDI data from the terminal.
- Audio Command-Line Tools - Provides terminal-based utilities for processing audio files into MIDI transcriptions.
- Audio Transcription APIs - Provides a programmatic interface for integrating audio-to-MIDI transcription into custom software applications.
- CLI Data Processors - Provides a command-line tool that transforms audio files into structured MIDI notation data.
- Audio Processing Automation - Exposes the model runtime through a terminal interface for batch processing and automated file conversion.
