很多人在爬取IP代理的过程中经常会遇到一些问题，比如IP限制，我们也都知道对付反爬虫有一个很关键的方法就是使用IP代理，那么我们应该如何获取这些可用的IP代理呢，今天小编给大家分享下关于爬取IP代理的经验。

　　1.找到几个提供免费IP代理的网站，获取IP数据源。

　　2.验证对应的IP代理访问出口IP是否跟本机的出口IP一致，得到不一致的IP代理列表。

　　3.根据自身的实验目的验证IP代理的响应速度，进行排序，择优选用。

　　4.代码如下：

　　关于这份代码，有几个地方做一下说明：

　　· check_a_ip(ip)：该函数为IP代理检查函数，返回两个值（一个为访问请求是否成功使用了代理，一个为检查的响应时间）。

　　· start_page、end_page： 手动输入获取IP代理的网页页码，这个需要根据具体网站设定。

　　· for i in range(int(start_page), int(end_page) + 1)：主函数的循环，遍历设定范围的网页。

　　· for tr in trs[1:len(trs)]：循环遍历并解析出一个网页中的所有IP代理，以及检验是否可用。

　　· ip_proxy_file：文本写入，最终把结果都写入proxy.txt中。

　　以上就是关于爬取IP代理的经验介绍，有兴趣的话，可以采用多线程进行爬取或者检验，这样的爬取速率会快很多，大家有时间可以尝试一下。