Advertisement

基于MindSpore框架使用GPT进行情感分类

阅读量:

IMDB数据集加载与处理

在情感分类项目中,若采用Mindspore框架构建循环神经网络RNN模型,可借助相同的数据集完成数据加载过程,具体实现方式可参考如下链接:Mindspore框架循环神经网络RNN模型实现情感分类|(一)IMDB影评数据集准备

复制代码
    imdb_train, imdb_valid = imdb_train.split([0.7, 0.3])
    imdb_train = imdb_train.batch(64, drop_remainder=True)
    imdb_valid = imdb_valid.batch(64, drop_remainder=True)
    
    
      
      
      
    

亦可采用mindspore所提供的封装版IMDB:
提示:需先完成依赖项的安装

复制代码
    pip install -i https://pypi.mirrors.ustc.edu.cn/simple mindspore==2.2.14
    pip install mindnlp
    pip install jieba
    
    
      
      
      
    

通过调用load_dataset函数可实现对imdb数据

全部评论 (0)

还没有任何评论哟~