
qq:800819103
在线客服,实时响应
qq群
在线客服,实时响应
客服电话
13318873961php如何验证代理ip?说到代理IP,经常使用网络的人都知道,代理IP在我们的生活工作中应用很广泛,那么HTTP代理IP验证呢?我们为什么需要对代理IP进行验证呢?是因为我们在网络中抓取到的代理IP数量很大,但是使用率取很低,往往不到十之二三,所以在我们使用代理IP对IP进行验证以剔除不能使用的代理IP,剩下的有效代理IP才能够提高我们的工作效率。
这里首先说一下大体思路,在我们抓取到的数据表中,要进行验证的话肯定是需要提取出来的,然后通过PHP中curl函数设置代理,再访问百度或者其他网站,通过返回的状态码是否等于200来判断代理IP是不是可以正常使用的。
由于代码太长,一些不必要的代码就不贴出来了,下面看看curl验证代理IP的核心代码。
//代理IP验证方法 function GetHttpStatusCode($proxy){ $curl = curl_init(); curl_setopt ($curl, CURLOPT_PROXY, $proxy);//使用代理访问 curl_setopt($curl,CURLOPT_URL,"http://www.baidu.com");//获取内容url curl_setopt($curl,CURLOPT_HEADER,1);//获取http头信息 curl_setopt($curl,CURLOPT_NOBODY,1);//不返回html的body信息 curl_setopt($curl,CURLOPT_RETURNTRANSFER,1);//返回数据流,不直接输出 curl_setopt($curl,CURLOPT_TIMEOUT,5); //超时时长,单位秒 curl_exec($curl); $rtn= curl_getinfo($curl,CURLINFO_HTTP_CODE); curl_close($curl); return $rtn; }
调用GetHttpStatusCode(代理IP地址:端口)方法就能返回该代理IP在访问百度首页时所返回的状态码,在需要的地方对状态码进行判断就能加以利用了。
相关文章内容简介
1 php如何验证代理ip?
php如何验证代理ip?说到代理IP,经常使用网络的人都知道,代理IP在我们的生活工作中应用很广泛,那么HTTP代理IP验证呢?我们为什么需要对代理IP进行验证呢?是因为我们在网络中抓取到的代理IP数量很大,但是使用率取很低,往往不到十之二三,所以在我们使用代理IP对IP进行验证以剔除不能使用的代理IP,剩下的有效代理IP才能够提高我们的工作效率。 ... [阅读全文]
最新标签
推荐阅读
06
2019-03
怎么维护爬虫的代理IP池?
当一个IP不断被重复使用后,即使你多小心使用,也很容易会失效,当一个一个IP逐渐失效,这IP池中的IP越来越少将会导致爬虫的正常使用,那么怎么维护爬虫的代理IP池呢?
14
2019-03
利用python爬虫给文章刷浏览量
python爬虫主要是用于去网站进行网页信息的采集,除了这个用途之外,还有没有其他的使用方法呢?既然python爬虫可以浏览网页进行数据的爬取,那么说明python爬虫也是可以为文章增加阅读量的
28
2019-05
爬虫代理IP如何选择?
由于开python培训有讲过爬虫的缘故,这个问题已经被ask无数次了,一般问的基友也都是爬虫防ban用的,总体来讲,质量好的都不便宜,便宜的质量都比较渣,一分钱一分货。
24
2019-04
代理ip软件的基本软件概述
在市场营销中,最常使用的自然就是换ip软件。自然应对的这种市场需求,网络中也有相应的一些软件被开发并且进行编程。但是不得不说,纯粹的ip软件所能够工作的,效率有限,而它的引申
热门文章