Python编程网络爬虫技术用于新浪网
发布时间
阅读量:
阅读量
- 新浪新闻
- 爬虫
- python
注解内容已较为详尽,现将完整代码呈现,诚邀各位专家提出宝贵意见与建议。
from selenium import webdriver
from selenium.webdriver.chrome.options import Options
from selenium.webdriver.common.by import By
from time import sleep
from lxml import etree
import os
import requests
import csv
# 创建一个无头浏览器对象
chrome_options = Options()
# 设置它为无框模式
chrome_options.add_argument('--headless')
# 如果在windows上运行需要加代码
chrome_options.add_argument('--disable-gpu')
browser = webdriver.Chrome(chrome_options=chrome_options)
# 设置一个10秒的隐式等待
browser.i
全部评论 (0)
还没有任何评论哟~
