Natural Language Processing for the next decade. Tokenization, Part-of-Speech Tagging, Named Entity Recognition, Syntactic & Semantic Dependency Parsing, Document Classification

Gathers machine learning and Tensorflow deep learning models for NLP problems, 1.13 < Tensorflow < 2.0

Underthesea - Vietnamese NLP Toolkit

Developer friendly Natural Language Processing ✨

Persian NLP Toolkit

Jcseg is a light weight NLP framework developed with Java. Provide CJK and English segmentation based on MMSEG algorithm, With also keywords extraction, key sentence extraction, summary extraction implemented based on TEXTRANK algorithm. Jcseg had a build-in http server and search modules for lucene,solr,elasticsearch,opensearch

Self-contained Japanese Morphological Analyzer written in pure Go

A Japanese Tokenizer for Business

PhoBERT: Pre-trained language models for Vietnamese (EMNLP-2020 Findings)

A Vietnamese natural language processing toolkit (NAACL 2018)

CogComp's Natural Language Processing Libraries and Demos: Modules include lemmatizer, ner, pos, prep-srl, quantifier, question type, relation-extraction, similarity, temporal normalizer, tokenizer, transliteration, verb-sense, and more.

Natural Language Toolkit for Malaysian language,https://malaya.readthedocs.io/

A suite of Arabic natural language processing tools developed by the CAMeL Lab at New York University Abu Dhabi.

API of Articut tiếng Trung đoạn từ ( kiêm cụ ngữ ý từ tính đánh dấu ): “Đoạn từ” lại xưng “Phân từ”, là tiếng Trung tin tức xử lý cơ sở. Articut không cần máy móc học tập, không cần tư liệu mô hình, chỉ dùng hiện đại bạch thoại tiếng Trung ngữ pháp quy tắc, tức có thể đạt tới SIGHAN 2005 F1-measure 94% trở lên, Recall 96% trở lên thành tích.

A neural network architecture for NLP tasks, using cython for fast performance. Currently, it can perform POS tagging, SRL and dependency parsing.

Python version of Sudachi, a Japanese tokenizer.

A Japanese tokenizer based on recurrent neural networks

Juman++ (a Morphological Analyzer Toolkit)

Empower Sequence Labeling with Task-Aware Neural Language Model | a PyTorch Tutorial to Sequence Labeling

Pytorch-NLU, một cái tiếng Trung văn bản phân loại, danh sách đánh dấu công cụ bao, duy trì tiếng Trung trường văn bản, đoản văn bổn nhiều loại, nhiều nhãn phân loại nhiệm vụ, duy trì tiếng Trung mệnh danh thật thể phân biệt, từ tính đánh dấu, phân từ, rút ra thức văn bản trích yếu chờ danh sách đánh dấu nhiệm vụ. Ptorch NLU, a Chinese text classification and sequence annotation toolkit, supports multi class and multi label classification tasks of Chinese long text and short text, and supports sequence annotation tasks such as Chinese named entity recognition, part of spee