Web Scraper 通过点击更多按钮进行翻页操作
发布时间
阅读量:
阅读量

这是简易数据分析系列的第 8 篇文章。
原文首发于博客园:简易数据分析 08。
在Web Scraper 翻页——控制链接批量抓取数据一文中,我们曾探讨了如何实现对网页链接进行批量数据抓取的技术途径。
然而,在浏览某些网站时,会发现当页面被下拉后,需要手动点击类似**「加载更多」**的按钮才能继续获取信息,而此时网页地址并未发生任何改变。
因此,原先依赖链接批量抓取数据的方式已无法奏效,这就要求我们必须模拟用户点击**「加载更多」**按钮的行为,以实现对更多数据内容的获取。

还没有任何评论哟~
