Advertisement

实战项目一:安居客(北京)二手房抓取房源信息

阅读量:

其次

该地址用于引用

二、分析网页和确定储存方式

首先需要做的是确定翻页规则

第一页 发现地址为

第二页 发现地址为

第三页 发现地址为

有心的学子或许早已察觉某种异样之处,在这本文档中唯有该页面末尾处的数据呈现明显变动。换言之,在此份文件中每一页则依次对应p1、p2、p3。

此外我们建议确定解析数据采用的方法以便后续操作更具可追溯性为此我们需要了解当前系统的响应格式为此我们采用了lxml库来进行html文档的解析在具体实现过程中每个数据对应的xpath解析式为

复制代码
 .xpath('//div[@class="house-title"]/a/@href')  # 房源链接

    

全部评论 (0)

还没有任何评论哟~