1 repositorio
Utilities that use keyword dictionaries to perform extraction or modification of content within strings.
Distinct from Dictionary Management Utilities: Different from compression or data manipulation utilities; this is specifically for text content processing
Explore 1 awesome GitHub repository matching data & databases · Dictionary-Based Text Processors. Refine with filters or upvote what's useful.
FlashText es un procesador de texto basado en diccionarios y una librería de extracción de palabras clave diseñada para la búsqueda de cadenas de alto rendimiento y el reemplazo programático de contenido. Proporciona utilidades especializadas para identificar y recuperar términos predefinidos de texto o intercambiar términos específicos con cadenas de reemplazo en grandes volúmenes de datos. El proyecto utiliza una implementación de búsqueda de cadenas Aho-Corasick para permitir la coincidencia de múltiples patrones. Este enfoque permite el escaneo de texto en una sola pasada y una complejidad de búsqueda de tiempo lineal, asegurando que el tiempo de procesamiento dependa de la longitud del texto de entrada en lugar del tamaño del diccionario de palabras clave. La librería cubre la gestión de diccionarios de palabras clave para mantener listas de términos específicos y proporciona flujos de trabajo tanto para el reemplazo automático de texto como para la extracción de palabras clave. Estas capacidades permiten la modificación y recuperación sistemática de términos predefinidos dentro de datasets masivos.
Provides a high-performance utility for managing keyword dictionaries to programmatically extract or modify string content.