您的位置:首页 > 新闻资讯 >文章内容
html标签干扰爬虫破解方法
来源:互联网 作者:admin 时间:2019-10-04 10:15:00

  不同的网站采用不一样的反爬虫方法,这个时候就需要我们爬虫工程师去进行好好研究了。针对每一种不同的方案,我们都能够找到一个突破口,这样才是爬虫的正确姿态。代理IP下面跟大家说说html标签干扰怎么破。


html标签干扰爬虫破解方法


  html标签干扰


  通过在重要数据的标签里加入一些有的没的隐藏内容的标签,干扰数据的获取。


  如例子:xxIP代理平台


  <!--html-->

  <td class="ip">

  <p style="display:none;">2</p>

  <span>2</span>

  <span style="display:inline-block;"></span>

  <div style="display: inline-block;">02</div>

  <p style="display:none;">.1</p>

  <span>.1</span>

  <div style="display:inline-block;"></div>

  <span style="display:inline-block;"></span>

  <div style="display:inline-block;">09</div>

  <span style="display: inline-block;">.</span>

  <span style="display:inline-block;">23</span>

  <p style="display:none;">7</p>

  <span>7</span>

  <p style="display:none;"></p>

  <span></span>

  <span style="display: inline-block;">.</span>

  <div style="display: inline-block;"></div>

  <p style="display:none;">3</p>

  <span>3</span>

  <div style="display: inline-block;">5</div>:

  <span class="port GEA">80</span>

  </td>

  <!--js-->

  <script>

  $(".ip:eq(0)>*:hidden").remove()

  $(".ip:eq(0)").text()

  </script>

  <!--

  输出:202.109.237.35:80


  通过移除干扰标签里有display:none隐藏标签,然后再获取text就不会有干扰的内容了


  -->

  破解思路:


  过滤掉干扰混淆的HTML标签,或者只读取有效数据的HTML标签的内容。


  以上就是具体的操作方案,机灵代理,自建200+机房,数万拨号线路,提供企业级HTTP代理服务,IP覆盖全国200+城市,高匿名代理IP帮助你保护个人隐私。无论是网络爬虫、互联网营销、投票打榜都可以使用。


相关文章内容简介
推荐阅读
  • 16 2019-04
    那些刷单不被检测到的商家,都是使用了IP代理吗?

    那些刷单不被检测到的商家,都是使用了IP代理吗?如今,网络购物比较普及了,商家为了吸引客流,大部分都会刷一些数据,把销售量,评论等这些数据做好,可以增加吸引力的。这些数据都

  • 09 2019-09
    代理IP知识:私有IP与公有IP的区别

    私有IP是什么?公有IP又是什么?为什么IP也能够划分为公有跟私有的呢?在我们使用代理IP的时候,会与不同的IP打交道,如果想要了解更加透彻,那么我们需要从头开始进行了解,从IP开始认识。

  • 31 2019-05
    账号IP地址定位异常被封的几率大

    账号IP地址定位异常被封的几率大,这是很常见的事情。我们需要连接网络,这是一定要获取到IP地址才能连接到网络的。

  • 01 2020-07
    如何获得稳定的代理IP软件

    代理ip是网络爬虫不可缺少的部分,随着大数据的兴起,每个网站都有自己的庞大的数据信息和每天的更新,个个网站也对自己的网站加强自我保护及信息流失,增加了网站反爬虫机制,在网站

  • 24 2020-12
    为什么说代理IP很重要

    越来越多的web工作者离不开代理IP。作为一种极其重要的网络“工具”,它不仅可以连接外部互联网和局域网,保证网络系统的正常运行,还可以保护自身的网络信息安全。

  • 14 2019-05
    ip代理是否可用测试

    ip代理是否可用测试难吗?如果比较简单易学就可以在选择IP代理之前,先进行测试的,这样预防买到比较差的IP代理,那么ip代理有效性要怎么检测呢?下面小编分享一些有关测试ip代理有效性

在线咨询
大客户经理
大客户经理
1829380381
13316264505

大客户经理微信

微信公众号

微信公众号

回到顶部