awesome-repositories.com
المدونة
awesome-repositories.com

اكتشف أفضل مستودعات المصادر المفتوحة باستخدام بحث مدعوم بالذكاء الاصطناعي.

استكشفعمليات بحث منسقةبدائل مفتوحة المصدربرمجيات ذاتية الاستضافةالمدونةخريطة الموقع
المشروعحولكيفية ترتيب النتائجالصحافةخادم MCP
قانونيالخصوصيةالشروط
© 2026 Bringes Technology SRL·VAT RO45896025·hello@awesome-repositories.com
·

4 مستودعات

Awesome GitHub RepositoriesToken-Level Incremental Processing

Real-time processing of incoming tokens to identify roles and content in a live stream.

Distinct from Incremental Content Streaming: Focuses on the real-time identification of model roles/content from a token stream, not just UI content updates.

Explore 4 awesome GitHub repositories matching web development · Token-Level Incremental Processing. Refine with filters or upvote what's useful.

Awesome Token-Level Incremental Processing GitHub Repositories

اعثر على أفضل المستودعات باستخدام الذكاء الاصطناعي.سنبحث عن أفضل المستودعات المطابقة باستخدام الذكاء الاصطناعي.
  • openai/harmonyالصورة الرمزية لـ openai

    openai/harmony

    4,409عرض على GitHub↗

    Harmony هو SDK ذكاء اصطناعي مصمم لترميز المحادثات، وتنسيق تخطيطات التفكير، وتحليل المخرجات الخام، وتحديد مخططات استدعاء الأدوات. يوفر نظاماً لتحويل الحوارات المنظمة واستدعاءات الأدوات إلى تسلسلات الرموز المطلوبة لاستنتاج وتدريب النماذج اللغوية الكبيرة. يتضمن المشروع منسق مخرجات ينظم سلاسل التفكير والمخرجات متعددة القنوات في تخطيطات متسقة لمنع فقدان الرموز. كما يتميز بمحلل استجابة يحول رموز الإكمال الخام والبث المباشر مرة أخرى إلى كائنات وأدوار رسائل منظمة. يدير SDK تكامل الأدوات من خلال إطار عمل لتحديد الوظائف القابلة للاستدعاء ومساحات الأسماء. كما يوفر قدرات لتحليل الرموز في الوقت الفعلي، وتكوين سلوك النموذج، وتسلسل المحادثة القائم على الحالة.

    Processes incoming tokens one by one to identify roles and content in real-time from a live stream.

    Rust
    عرض على GitHub↗4,409
  • hardmath123/nearleyالصورة الرمزية لـ Hardmath123

    Hardmath123/nearley

    3,740عرض على GitHub↗

    Nearley is a JavaScript parser toolkit used to define context-free grammars and generate corresponding parsers. It features an EBNF grammar compiler that transforms language definitions written in extended Backus-Naur Form into executable JavaScript code, utilizing an Earley parser implementation to process any context-free grammar. The toolkit distinguishes itself by its ability to handle left-recursion and ambiguity without failing, allowing it to identify and return multiple valid derivations for a single input string. It also includes a grammar fuzzing generator to produce random strings

    Parses input streams in real time to provide immediate feedback or predictive results in a UI.

    JavaScript
    عرض على GitHub↗3,740
  • kach/nearleyالصورة الرمزية لـ kach

    kach/nearley

    3,740عرض على GitHub↗

    Nearley is a JavaScript parser toolkit and context-free grammar compiler. It functions as an Earley parser generator that transforms BNF-like grammar definitions into executable code capable of analyzing text and generating abstract syntax trees. The project is distinguished by its ability to handle any context-free grammar, including those with left recursion and ambiguity, by maintaining multiple valid derivations for a single input. It further supports incremental parsing, allowing input strings to be processed in chunks to provide partial results and real-time feedback. Beyond core parsi

    Processes text streams in small chunks to provide immediate structural feedback for user interfaces.

    JavaScript
    عرض على GitHub↗3,740
  • redhat-developer/yaml-language-serverالصورة الرمزية لـ redhat-developer

    redhat-developer/yaml-language-server

    1,486عرض على GitHub↗

    The YAML Language Server is a backend service that provides intelligent editing support for YAML files by implementing the Language Server Protocol. It functions as a validation and analysis engine, enabling code editors to offer real-time diagnostics, structural feedback, and automated assistance for configuration-heavy development workflows. The project distinguishes itself through its schema-driven approach to data integrity, utilizing a JSON Schema validation engine to verify document structure against formal definitions. It supports complex configuration management by allowing developers

    Processes only modified sections of a file to provide immediate feedback without re-parsing the entire document on every keystroke.

    TypeScriptlanguage-serveryamlyaml-support
    عرض على GitHub↗1,486
  1. Home
  2. Web Development
  3. Streaming Rendering
  4. Incremental Content Streaming
  5. Token-Level Incremental Processing

استكشف الوسوم الفرعية

  • Incremental Parse FeedbackReal-time processing of input streams to provide immediate structural feedback in user interfaces. **Distinct from Token-Level Incremental Processing:** Distinct from Token-Level Incremental Processing: focuses on returning partial parse trees for UI responsiveness rather than role identification in LLM streams.