200字范文,内容丰富有趣,生活中的好帮手!
200字范文 > python爬取了很多代理ip怎么验证是否可用 – python – 前端 python查看磁盘信息

python爬取了很多代理ip怎么验证是否可用 – python – 前端 python查看磁盘信息

时间:2020-07-10 10:09:49

相关推荐

python爬取了很多代理ip怎么验证是否可用 – python – 前端 python查看磁盘信息

你可以用爬取到的代理打开一个网页,看代理是否可以访问网页来进行判断。

urllib2可以通过urllib2.ProxyHandler设置代理来访问网页,流程如下

#设置代理proxy_handler = urllib2.ProxyHandler({‘http’: ‘http://’+ip+’:’+str(port)+’/’})opener = urllib2.build_opener(proxy_handler)urllib2.install_opener(opener)# 访问网页req = urllib2.Request(url)

然后你就可以根据req返回的内容或状态码来判断代理是否能够打开指定url页面,从而判断代理ip是否可用

本内容不代表本网观点和政治立场,如有侵犯你的权益请联系我们处理。
网友评论
网友评论仅供其表达个人看法,并不表明网站立场。