在写网络爬虫时需要加入代理IP，若是不调用代理IP，其效果是非常差的，特别是使用免费的代理IP。这需要在使用之前，需要进行代理IP的有效性检测。

　　因此，大家在做爬虫的时候，会事先爬取很多的代理ip作为备用，但是有些可能还用，有些可能就失效了。这会让程序会因此变得不甚稳定，最好可以在爬虫运行之前，保证代理IP的高可用性。比如，对这些代理IP进行清洗，找到有效的代理IP。

　　我个人认为，测试代理IP有效性还是得从服务器端下手，毕竟代理IP是要去访问真正的服务器端的。所以在服务器端进行验证最合适不过了。服务器端验证完毕之后，将结果返回给客户端，如此“清洗”工作就可以据此完成。保留有效的代理IP，去除失效的代理IP。

　　代码如下：

　　清洗效果：

　　另外有没有更简单的方法？怎样快速判断代理ip是否可用？可以尝试：

　　在命令行下输入telnet XXX.XX.XX.XXX XX

　　即 telnet ipaddress port

　　例如： telnet 213.197.81.50 3128

　　如果连接上，说明有效

　　当然，测试代理IP有效性的方法有很多，仅供参考。要想提高爬取的效果，建议还是需要购买付费版的代理IP使用的（如：代理精灵），即使免费也耗费大量的时间，时间也是成本，这非常不划算。