Advertisement

Discrete representation of NLP text

阅读量:

文本的离散表示(2022-03-07)

  • one-hot编码方式
    • 词汇袋结构
    • 词频-逆文档频率算法
    • N元语法模型
image.png
image.png

one-hot编码方法应用

复制代码
    """
    oneHotencoder举例
    """
    
    from sklearn import preprocessing
    enc = preprocessing.OneHotEncoder()
    enc.fit([[0,0,3],[1,1,0],[0,2,1],[1,0,2]])#fit来学习编码
    res=enc.transform([[0,1,3]]).toarray()#结果转化为数组
    print(res)
    

全部评论 (0)

还没有任何评论哟~