1 रिपॉजिटरी
Awesome GitHub RepositoriesTokenization Testing
Utilities to evaluate how text analyzers break down raw text into tokens before indexing.
Distinct from Tokenization Pipelines: Focuses on testing the analyzer's output for correctness, while the parent refers to the operational pipelines themselves.
Explore 1 awesome GitHub repository matching artificial intelligence & ml · Tokenization Testing. Refine with filters or upvote what's useful.
Awesome Tokenization Testing GitHub Repositories
AI के साथ बेहतरीन रिपॉजिटरी खोजें।हम AI का उपयोग करके सबसे सटीक रिपॉजिटरी खोजेंगे।
- zombodb/zombodb
zombodb/zombodb
4,730GitHub पर देखेंZombodb एक डेटाबेस एक्सटेंशन और रिलेशनल डेटा इंडेक्स है जो PostgreSQL को Elasticsearch के साथ एकीकृत करता है। यह एक SQL सर्च इंटरफ़ेस प्रदान करता है, जो उपयोगकर्ताओं को नेटिव JSON APIs के बजाय मानक SQL फ़ंक्शंस और सिंटैक्स का उपयोग करके जटिल सर्च क्वेरी और एग्रीगेशन निष्पादित करने की अनुमति देता है। यह प्रोजेक्ट उच्च-प्रदर्शन पूर्ण-पाठ खोज (full-text search) और एनालिटिक्स को सक्षम करने के लिए PostgreSQL से रिमोट सर्च इंजन में रिलेशनल डेटा को सिंक्रोनाइज़ करता है। यह सिस्टम रिलेशनल स्ट्रक्चर्स को सर्च इंजन क्षमताओं के साथ जोड़कर खुद को अलग करता है, विशेष रूप से ज्यामिति और भूगोल प्रकारों के लिए जियोस्पेशियल सर्च एकीकरण के माध्यम से। यह एक SQL-टू-JSON क्वेरी मैपिंग लेयर लागू करता है जो उन्नत टेक्स्ट विश्लेषण को सक्षम बनाता है—जिसमें रिलेशनल वातावरण के भीतर सीधे फ़ज़ी मैचिंग, प्रॉक्सिमिटी सर्च और प्रासंगिकता स्कोरिंग शामिल है। यह प्रोजेक्ट इंडेक्स लाइफसाइकिल मैनेजमेंट, स्वचालित रिलेशनल डेटा सिंक्रोनाइज़ेशन, और जटिल विश्लेषणात्मक एग्रीगेशन सहित व्यापक क्षमता क्षेत्रों को कवर करता है। यह स्थान-आधारित क्वेरीज़ के लिए स्थानिक इंडेक्सिंग, कस्टम टेक्स्ट विश्लेषण पाइपलाइन्स, और इंडेक्स आँकड़ों व क्लस्टर स्वास्थ्य का ऑडिट करने के लिए मॉनिटरिंग टूल्स का समर्थन करता है। सुरक्षा को TLS का उपयोग करके डेटाबेस और सर्च इंजन के बीच एन्क्रिप्टेड कनेक्शन के माध्यम से संभाला जाता है।
Evaluates how custom analysis pipelines and tokenizers process text before it is applied to a search index.
PLpgSQL
