基于MindSpore框架使用GPT进行情感分类
发布时间
阅读量:
阅读量
IMDB数据集加载与处理
在情感分类项目中,若采用Mindspore框架构建循环神经网络RNN模型,可借助相同的数据集完成数据加载过程,具体实现方式可参考如下链接:Mindspore框架循环神经网络RNN模型实现情感分类|(一)IMDB影评数据集准备
imdb_train, imdb_valid = imdb_train.split([0.7, 0.3])
imdb_train = imdb_train.batch(64, drop_remainder=True)
imdb_valid = imdb_valid.batch(64, drop_remainder=True)
亦可采用mindspore所提供的封装版IMDB:
提示:需先完成依赖项的安装
pip install -i https://pypi.mirrors.ustc.edu.cn/simple mindspore==2.2.14
pip install mindnlp
pip install jieba
通过调用load_dataset函数可实现对imdb数据
全部评论 (0)
还没有任何评论哟~
