网站平台出于各方面的考虑，都会有自己的一些保护措施，为了避免禁止恶意爬虫的大量采集给网站造成不好的影响，网站的反爬虫机制越加完善。这对于网络爬虫来说，这并不是一件好事，越是严格，代表着要花更多的精力去解决这个反爬问题。

　　有时候还要花成本去购买代理IP使用，如果不想花成本，那就需要我们找到免费的代理IP池，那么如何搭建免费代理IP池呢？scylla可作爬虫的代理IP池吗？下面小编介绍下关于搭建代理IP池方法：

　　一、免费开源代理ip池--Scylla

　　Scylla是一款高质量的免费代理IP池工具，仅支持Python3.6。特性如下：

　　1.无头浏览器（headlessbrowsercrawling）爬虫；

　　2.易用的JSONAPI；

　　3.简单但美观的web用户界面，基于TypeScript和React（例如，代理的地理分布）；

　　4.最少仅用一条命令即可启动；

　　5.自动化的代理IP爬取与验证；

　　6.最少仅用一行代码即可与Scrapy和requests进行集成。

　　二、抓取免费IP搭建代理ip池

　　1.先导入相关的模块

　　import requests

　　from lxml import etree

　　import re

　　import time

　　2.定义函数，爬取网页信息

　　得到响应后，就是要提取页面的信息了，先用xpath表达式得到信息，包括IP地址、是否匿名、类型、连接时间、存活时间等，提取之后的内容用字典来盛装，然后返回该字典。

　　接下来就将上面得到的字典信息存入文件，存入之前要先进行第一次的检验，就是筛选出存活时间>100天，还有速度等限制条件的，这样至少可以保证得到的IP生命力是比一般的那些顽强。

　　然后就是主函数，在这个函数中实现调用其他函数，实现整个程序的功能，因为只是用来检验能否用该方法得到有效的IP，所以我的循环range(1, 2)只爬取了一页的内容。

　　到这儿整个程序执行之后就可以得到有效的IP了，部分结果如下图：

　　以上就是关于免费的代理IP池的搭建，当然搭建起来之后，如果需要进行使用，还是需要先进行检测的，否则这IP可能率会相对低上许多。

　　若是想要继续了解关键IP检测的方法，可以关注代理精灵的，代理精灵每天都提供一些免费的IP，可供使用，先到先得。