awesome-repositories.com
Blog
awesome-repositories.com

Descoperă cele mai bune repository-uri open source cu căutare AI.

ExploreazăCăutări recomandateAlternative open-sourceSoftware self-hostedBlogHartă site
ProiectDespreCum realizăm clasamentulPresăServer MCP
LegalConfidențialitateTermeni
© 2026 Bringes Technology SRL·VAT RO45896025·hello@awesome-repositories.com
·

2 repository-uri

Awesome GitHub RepositoriesMultilingual Text Processing

Handling language-specific tokenization, stemming, and normalization for search indexing across different languages.

Distinct from Language Variant Support: None of the candidates cover general natural language processing for search; they focus on programming language syntax or infrastructure SDKs.

Explore 2 awesome GitHub repositories matching data & databases · Multilingual Text Processing. Refine with filters or upvote what's useful.

Awesome Multilingual Text Processing GitHub Repositories

Găsește cele mai bune repo-uri cu AI.Vom căuta cele mai potrivite repository-uri folosind AI.
  • olivernn/lunr.jsAvatar olivernn

    olivernn/lunr.js

    9,203Vezi pe GitHub↗

    lunr.js is a JavaScript full-text search library and client-side search engine. It creates in-memory search indexes for fast keyword retrieval and ranked document matching within browser or Node.js environments. The library utilizes a JSON serializable search index, allowing the search structure to be converted to and from JSON for storage and distribution of pre-built search data. This enables search functionality for static websites by indexing content into portable files. The system supports advanced querying capabilities, including fuzzy text matching to account for typos, field-scoped i

    Provides specialized processing for different languages to handle stemming and normalization during indexing and search.

    JavaScript
    Vezi pe GitHub↗9,203
  • apache/lucene-solrAvatar apache

    apache/lucene-solr

    4,357Vezi pe GitHub↗

    Acest proiect este un motor de căutare full-text și o infrastructură de căutare enterprise concepută pentru indexarea și regăsirea unor seturi mari de documente. Oferă un framework cuprinzător pentru descoperirea informațiilor folosind rezultate ierarhizate și analiză lingvistică. Sistemul integrează căutarea prin similaritate vectorială de înaltă dimensiune pentru regăsirea semantică, alături de capabilitățile tradiționale full-text. Se distinge prin suportul pentru regăsirea datelor geospațiale, procesarea textului multilingv și un flux de lucru pentru sugestii de căutare care include completarea interogărilor cu toleranță la greșeli de scriere și corectarea ortografică. Platforma acoperă o gamă largă de capabilități de căutare și indexare, inclusiv execuția de interogări complexe, agregarea numărului de fațete și gruparea rezultatelor. Gestionează analiza textului prin tokenizare și normalizare, oferind în același timp instrumente specializate pentru unirea documentelor, evidențierea rezultatelor căutării și punctarea personalizată bazată pe recență și distanță. Este disponibilă o interfață de căutare Python pentru a expune funcționalitățile de indexare și interogare către medii de programare externe.

    Handles language-specific tokenization, stemming, and normalization to ensure accurate search results across different languages.

    backendinformation-retrievaljava
    Vezi pe GitHub↗4,357
  1. Home
  2. Data & Databases
  3. Multilingual Text Processing