基于cnn和rnn的文本分类实践

素颜马尾好姑娘i 2022-05-26 09:35 203阅读 0赞

本文主要介绍在文本分类中，使用CNN网络和RNN网络的实践，其中CNN又分为maxPool和k-maxpool。可以直接在juputer执行。

代码已经上传github

[https://github.com/yixiu00001/text-classify-cnn-rnn/blob/master/README.md][https_github.com_yixiu00001_text-classify-cnn-rnn_blob_master_README.md]

## 1.CNN+maxPool ##

text-classification-cnn-maxpool 该工程为cnn-maxpool相关代码。

dataOwn.py

主要包括基于word2vec的embedding方法构建词和index的映射词典，词长不到设定值的打padding以及数据的载入和batch\_iter

CNNDiseaseModel.py

主要是CNN网络相关的变量初始化及网络构造。 重点看placeholder/inference等部分，在计算损失部分，由于目前的label只有一个数值，非onehot类型，所以调用sparse\_softmax\_cross\_entropy\_with\_logits接口。

CNNDiseaseModelTrain.ipynb

这个文件是训练模型的文件，在train部分是整个训练的逻辑。

CNNDiseaseModelPredict.ipynb

这个文件是对已经训练好的模型，进行结果测试，提供了输入一段文本进行测试的接口和输入一个测试文件地址进行测试的接口。

## 2.CNN-k-max-pool ##

这里和上面工程的区别是使用了k-max pool，但是本实验中效果和max-pool差不多。 同样包含几个文件

dataOwn.py
    modelOneConv.py
    trainWord2vec.ipynb
    predictWord2vec.ipynb

# 3.text-classification-rnn #

这个文件是基于rnn实现的分类，可以选择使用LSTM或者GRU

rnn_model_oneLable.py
    train_rnn_oneLable.ipynb
    predict_rnn_oneLablelNew.ipynb

这三个文件对应的数据的label是一个数字，如0 ，1 ，2这种类型

rnn_model_onehotLable.py
    train_rnn_onehotLable.ipynb

这两个文件对应的数据的label是onehot类型，如100000000000000，010000000000

[https_github.com_yixiu00001_text-classify-cnn-rnn_blob_master_README.md]: https://github.com/yixiu00001/text-classify-cnn-rnn/blob/master/README.md

发表评论取消回复

表情：

评论列表（有 0 条评论，203人围观）

还没有评论，来说两句吧...

相关阅读

相关 PyTorch深度学习实战 | 基于RNN的文本分类

![ab0e740c81c84673aa08aeb04c933e3d.jpeg][] > PyTorch是当前主流深度学习框架之一，其设计追求最少的封装、最直观的设计，其简洁

秒速五厘米/ 2024年03月25日 16:37/ 0 赞/ 81 阅读

相关 CNN文本分类实现文本分类案例解析（附实例源码）

前言实现步骤 1.导入所需的库和模块： 2.设置随机种子： 3.定义模型超参数： 4.加载数据集：

ゝ一纸荒年。/ 2024年03月22日 17:10/ 0 赞/ 83 阅读

相关基于Bert的文本情感分类

详细代码已上传到github: [click me][] 摘要: 情感分类是对带有感情色彩的主观性文本进行分析、推理的过程,即分析说话人的态度,推断其所包含的情感

比眉伴天荒/ 2023年08月17日 16:32/ 0 赞/ 50 阅读

相关 cnn图像二分类 python_基于卷积神经网络（CNN）的仙人掌图像分类

今天我们的目标是建立一个分类器，将图像分类为“仙人掌”或“非仙人掌”。 ![30ef8a70cc4b1e1589b683bc4b42b4be.png][] 01. 数据集

太过爱你忘了你带给我的痛/ 2023年01月02日 04:27/ 0 赞/ 166 阅读

相关基于LSTM英文文本分类

一.安装相应依赖 pip3 install tensorflow==2.2.0 pip3 install numpy==1.19.3 pip3 i

港控/mmm°/ 2022年10月10日 01:43/ 0 赞/ 156 阅读

相关基于cnn和rnn的文本分类实践

本文主要介绍在文本分类中，使用CNN网络和RNN网络的实践，其中CNN又分为maxPool和k-maxpool。可以直接在juputer执行。代码已经上传github [

素颜马尾好姑娘i/ 2022年05月26日 09:35/ 0 赞/ 204 阅读

相关表情识别（二）--基于CNN分类

说白了，就是个分类任务，但是纯粹的CNN分类，只是对传统方式的提升，本质思路没有改变，效果也不是很明显。转自：https://blog.csdn.net/walilk

不念不忘少年蓝@/ 2022年05月26日 04:37/ 0 赞/ 273 阅读

相关 BN在CNN和RNN中的应用

Batch Normalization的基本思路和价值在之前一篇文章“Batch Normalization导读”介绍了，此处不赘述，背景知识请参考上面文章。看到BN后，很

落日映苍穹つ/ 2022年05月25日 09:18/ 0 赞/ 248 阅读

相关 cnn文本分类——运行代码text-classification-cnn-rnn-master路上遇到的坑——自定义数据集

本文章主要是把自己的数据整理成和该源代码相符的数据，然后再使用源代码训练自己的数据。运行过程可能有些许地方没写清楚，可参考另一个博主文章 [https://blog.csd

梦里梦外;/ 2022年05月20日 08:37/ 0 赞/ 135 阅读

相关 TensorFlow使用CNN实现中文文本分类

TensorFlow使用CNN实现中文文本分类读研期间使用过TensorFlow实现过简单的CNN情感分析（分类），当然这是比较low的二分类情况，后来进行多分

曾经终败给现在/ 2022年04月17日 03:35/ 0 赞/ 431 阅读