使用Scrapy获取腾讯职位信息
发布时间
阅读量:
阅读量
通过命令行界面建立一个Scrapy项目
scrapy startproject Tencent
- 对https://hr.tencent.com/position.php?腾讯招聘网站进行分析后可以得知,每页页面中展示的招聘信息数量为10条。我们借助爬虫工具采集了包括职位名称、职位类别、招聘人数、工作地点以及发布日期等信息。
因此,需要对 items.py 文件进行相应调整。通过使用 scrapy.Field() 方法来设定所需字段的名称。。
import scrapy
class TencentItem(scrapy.Item):
# define the fields for your item here like:
# name = scrapy.Field()
# 职位名
positionName = scrapy.Field()
# 职位详情连接
positionLink = scrapy.Field()
# 职位类
全部评论 (0)
还没有任何评论哟~
