1 repository
Automatic generation of candidate code patches to resolve discovered security vulnerabilities.
Distinct from Patch Generators: Focuses on the creation of fixes for vulnerabilities using LLMs, whereas Patch Generators traditionally refers to diff exporting tools.
Explore 1 awesome GitHub repository matching software engineering & architecture · AI-Generated Fixes. Refine with filters or upvote what's useful.
SWE-bench este un framework de benchmark și evaluare pentru ingineria software, conceput pentru a măsura capacitatea modelelor de limbaj mari de a rezolva probleme reale de pe GitHub. Oferă seturi de date și suite de evaluare pentru a verifica dacă patch-urile de cod generate de model repară corect bug-urile software. Proiectul include un benchmark multimodal pentru testarea modelelor de limbaj vizual pe probleme care implică interfețe grafice. Utilizează o colecție de probleme de repository pre-procesate și patch-uri gold-standard pentru a antrena și testa agenții de programare AI. Framework-ul oferă infrastructură pentru verificarea patch-urilor în containere și medii de execuție reproductibile pentru a asigura testarea consistentă pe diferite sisteme. Acoperă execuția automatizată a cazurilor de testare, verificarea predicției patch-urilor și generarea de seturi de date de învățare supervizată din rapoarte de bug-uri reale.
Provides a capability for AI models to generate proposed code patches to resolve real-world software issues.