Advertisement

无需人工标注即可实现支持搜索功能的文本分词与标签召回,并对查询进行改写及查询项的相关性分析

阅读量:

分词模型冷启动替换策略

若缺乏优质的分词工具,

可尝试联合使用多种方式,例如高频1gram、高频2gram、高频3gram以及高频4gram相结合。

示例如下:

在以下四个商品中

复制代码
    杠铃杆
    杠铃片
    举重杠铃
    举重哑铃
    
    
      
      
      
      
    

高频二元组为:

复制代码
    杠铃
    举重
    
    
      
      
    

则这4个商品的分词结果如下所示:

复制代码
    杠铃 杆
    杠铃 片
    举重 杠铃
    举重 哑铃
    
    
      
      
      
      
    

基于用户搜索行为,给item打上query标签 / 把query看成标签打在item上

复制代码
    用户高频搜 牛肉面 — 高频下单 面馆A 面馆B
    用户高频搜 牛肉拉面 — 高频下单 面馆A 面馆B
    
    
      
      
    

构建一个文本生成模型,

收集并整理用于训练的数据集:

复制代码
    输入 面馆A ,输出 牛肉面
    输入 面馆A ,输出 牛肉拉面
    输入 面馆B ,输出 牛肉面
    输入 

全部评论 (0)

还没有任何评论哟~