爬虫
Python--爬取豆瓣TOP250电影信息
最近在生产实习,要求自己找一个网站爬一下存储数据到excel表格中 我看电影也是按豆瓣TOP250来筛选的,手动翻页太麻烦,于是爬一下
[2019-09-02 更新] 后面要做作业答辩,改为存储到mysql数据库中
和网上大部分爬取的文章不同,我想要的是每部电影的剧情简介信息…
多线程爬取西刺高匿代理并验证可用性
为啥要用代理? 不管是爆破还是爬虫,经常都会遇见 ip 被封掉的情况,此时,自建一个可靠的代理池就显得很有必要了 代理有哪些分类 以代理的匿名度来分,可以分为透明代理、匿名代理和高度匿名代理
使用透明代理,对方服务器可以知道你使用了代理,并且也知道你的真实 IP。
使用匿名代…