View on GitHub

awesome_crawl

腾讯新闻、知乎话题、微博粉丝,Tumblr爬虫、斗鱼弹幕、妹子图爬虫、分布式设计等

Tumblr爬虫

filepath: tumblr_spider/tumblr_spider.py

useage: python tumblr_spider.py username example: python tumblr_spider.py user1,use2,use3

Attention: 你需要可以访问国外的代理,并在get_proxy()函数中设置