Stanford NLP Python library for tokenization, sentence segmentation, NER, and parsing of many human languages

结巴中文分词

中文自然语言处理数据集，平时做做实验的材料。欢迎补充提交合并。

Python library for processing Chinese text

NLTK Source

An Efficient Lexical Analyzer for Chinese

an re-implementation of rmmseg (Chinese word segmentation library for Ruby) in C++

文本数据管理和分析

为GPT/GLM等LLM大语言模型提供实用化交互接口，特别优化论文阅读/润色/写作体验，模块化设计，支持自定义快捷按钮&函数插件，支持Python和C++等项目剖析&自译解功能，PDF/LaTex论文翻译&总结功能，支持并行问询多种LLM模型，支持chatglm3等本地模型。接入通义千问, deepseekcoder, 讯飞星火, 文心一言, llama2, rwkv, claude2, m…

文本挖掘和预处理工具（文本清洗、新词发现、情感分析、实体识别链接、关键词抽取、知识抽取、句法分析等），无监督或弱监督方法

🌿 中文近义词：聊天机器人，智能问答工具包

pytextclassifier is a toolkit for text classification. 文本分类，LR，Xgboost，TextCNN，FastText，TextRNN，BERT等分类模型实现，开箱即用。

一键中文数据增强包 ； NLP数据增强、bert数据增强、EDA：pip install nlpcda

Get up and running with Llama 3.2, Mistral, Gemma 2, and other large language models.

LLM inference in C/C++