python3 urllib2中用urllib中设置代理IP,为什么返回的结果是代理IP的,而不是我要访问的网站百度

在使用爬虫爬取网络数据时如果长时间对一个网站进行抓取时可能会遇到IP被封的情况,这种情况可以使用代理更换ip来突破服务器封IP的限制

随手在百度上搜索免费代理IP,可以得到一系列的网站这里我们通过对西刺网站的抓取来举例。

验证代理IP是否可用原理是使用代理IP访问指定网站,如果返回状态为200表示这个代理是可以使用的

}

抄袭、复制答案以达到刷声望汾或其他目的的行为,在CSDN问答是严格禁止的,一经发现立刻封号是时候展现真正的技术了!

}

我要回帖

更多关于 python3 urllib2 的文章

更多推荐

版权声明:文章内容来源于网络,版权归原作者所有,如有侵权请点击这里与我们联系,我们将及时删除。

点击添加站长微信