awesome-repositories.com
Blog
MCP
awesome-repositories.com

Découvrez les meilleurs dépôts open-source grâce à notre recherche par IA.

ExplorerRecherches sélectionnéesAlternatives open sourceLogiciels auto-hébergésBlogPlan du site
ProjetServeur MCPÀ proposNotre méthodologiePresse
Mentions légalesConfidentialitéConditions d'utilisation
© 2026 Bringes Technology SRL·VAT RO45896025·hello@awesome-repositories.com
·
Kaleidophon avatar

Kaleidophon/token2index

0
View on GitHub↗
50 stars·6 forks·Python·GPL-3.0·3 vuestoken2index.readthedocs.io↗

Token2index

A lightweight but powerful library to build token indices for NLP tasks, compatible with major Deep Learning frameworks like PyTorch and Tensorflow.

Features

  • Natural Language Processing - Listed in the “Natural Language Processing” section of the FunNLP awesome list.
  • Lexical Analysis Tools - Lightweight library for mapping tokens to indices.

Historique des stars

Graphique de l'historique des stars pour kaleidophon/token2indexGraphique de l'historique des stars pour kaleidophon/token2index

Recherche par IA

Explorez plus de dépôts awesome

Décrivez vos besoins en langage naturel — l'IA classe des milliers de projets open source sélectionnés par pertinence.

Start searching with AI

Alternatives open source à Token2index

Projets open source similaires, classés selon le nombre de fonctionnalités partagées avec Token2index.
  • berniey/hanziconvAvatar de berniey

    berniey/hanziconv

    190Voir sur GitHub↗

    Hanzi Converter for Traditional and Simplified Chinese

    Python
    Voir sur GitHub↗190
  • blmoistawinde/harvesttextAvatar de blmoistawinde

    blmoistawinde/HarvestText

    2,621Voir sur GitHub↗

    文本挖掘和预处理工具(文本清洗、新词发现、情感分析、实体识别链接、关键词抽取、知识抽取、句法分析等),无监督或弱监督方法

    Pythondependency-parsergiteeharvesttext
    Voir sur GitHub↗2,621
  • 1eez/103976Avatar de 1eez

    1eez/103976

    1,034Voir sur GitHub↗

    103976个英语单词库(sql版,csv版,Excel版)包含英文单词,中文翻译,单词的词性及多种词义,执行SQL语句就可以生成表,支持SQL Server,MySQL等多种数据库

    PLpgSQL
    Voir sur GitHub↗1,034
  • fighting41love/coconlpAvatar de fighting41love

    fighting41love/cocoNLP

    1,130Voir sur GitHub↗

    A Chinese information extraction tool.

    Python
    Voir sur GitHub↗1,130
Voir les 30 alternatives à Token2index→

Questions fréquentes

Que fait kaleidophon/token2index ?

A lightweight but powerful library to build token indices for NLP tasks, compatible with major Deep Learning frameworks like PyTorch and Tensorflow.

Quelles sont les fonctionnalités principales de kaleidophon/token2index ?

Les fonctionnalités principales de kaleidophon/token2index sont : Natural Language Processing, Lexical Analysis Tools.

Quelles sont les alternatives open-source à kaleidophon/token2index ?

Les alternatives open-source à kaleidophon/token2index incluent : blmoistawinde/harvesttext — 文本挖掘和预处理工具(文本清洗、新词发现、情感分析、实体识别链接、关键词抽取、知识抽取、句法分析等),无监督或弱监督方法. glassywing/bi-lstm-crf — 使用keras实现的基于Bi-LSTM + CRF的中文分词+词性标注. 1eez/103976 — 103976个英语单词库(sql版,csv版,Excel版)包含英文单词,中文翻译,单词的词性及多种词义,执行SQL语句就可以生成表,支持SQL Server,MySQL等多种数据库. berniey/hanziconv — Hanzi Converter for Traditional and Simplified Chinese. fighting41love/coconlp — A Chinese information extraction tool. glassywing/transformer-word-segmenter — Sequence labeling base on universal transformer (Transformer encoder) and CRF; 基于Universal Transformer + CRF 的中文分词和词性标注.