Advertisement

使用Scrapy获取腾讯职位信息

阅读量:

通过命令行界面建立一个Scrapy项目

复制代码
    scrapy startproject Tencent
    
  1. https://hr.tencent.com/position.php?腾讯招聘网站进行分析后可以得知,每页页面中展示的招聘信息数量为10条。我们借助爬虫工具采集了包括职位名称、职位类别、招聘人数、工作地点以及发布日期等信息。

因此,需要对 items.py 文件进行相应调整。通过使用 scrapy.Field() 方法来设定所需字段的名称。。

复制代码
 import scrapy

    
  
    
  
    
 class TencentItem(scrapy.Item):
    
     # define the fields for your item here like:
    
     # name = scrapy.Field()
    
     # 职位名
    
     positionName = scrapy.Field()
    
     # 职位详情连接
    
     positionLink = scrapy.Field()
    
     # 职位类

全部评论 (0)

还没有任何评论哟~