piaoxue88 / beautifulnlp

美丽东自然语言处理百宝箱~命名实体识别，文本分类，语言模型，文本摘要。

beautifulNLP

命名实体识别

模型名称	使用框架
Bi-LSTM	TensorFlow1.x
Bi-LSTM	TensorFlow2.x
Bi-LSTM-CRF	TensorFlow1.x
Bi-LSTM-CRF	TensorFlow2.x
ID-CNN-CRF	TensorFlow1.x
BERT-Bi-LSTM-CRF	TensorFlow1.x
HMM	-

语言模型

模型名称	使用框架
one-hot	-
tf-idf-sentence	-
word2vec	Gensim
glove	官方源码
n-gram	-

文本分类

模型名称	使用框架
Naive Bayesian 二分类	Scikit-Learn
RNN 二分类	TensorFlow1.x
Bert-baseline 多分类	Pytorch
TextRNN 多分类	TensorFlow 2.x
TextCNN 多分类	TensorFlow 2.x

文本摘要

模型名称	使用框架
TextRank-MMR	Jieba
PGN+Converage+EDA	Pytorch

文本生成

模型名称	使用框架
LSTM	TensorFlow 1.x

资料整理

• 停用词文件
• 逻辑回归
• tfidf
• BM25

数据集百度网盘链接

对应目录相同

链接：https://pan.baidu.com/s/1TJXNq2dv2JmWNFC1T7IRBQ 提取码：khgp