Advertisement

Python爬虫:批量获取微博图片(不使用cookie)

阅读量:

引言:最初我希望获取微博上的图片资料以便进行学习研究。然而我发现大多数技术博客都需要一个访问Cookie才能正常运行。于是我在网上努力寻找合适的资源时偶然访问到了一位技术博主的个人博客:
http://www.omegaxyz.com/2018/02/13/python_weibo/
(特别推荐这位博主的文章因为他提供了很多实用的技术干货))。经过一番学习尝试后发现其分享的Python微博数据爬取方法非常有效:

复制代码
    # -*- coding: utf-8 -*-
    import urllib.request
    import json
    import requests
    import os
    
    path = 'D:\ picture\ weibo\ '
    
    #id = '2093492691'
    id = '2374240301'
    proxy_addr = "122.241.72.191:808"
    pic_num = 0
    weibo_name = "programmer"
    
    
    def use_proxy(url, proxy_addr):
    req = urllib.request.Request(url)
    req.add_header("User-A

全部评论 (0)

还没有任何评论哟~