百科问答小站 logo
百科问答小站 font logo



有哪些有趣的反爬虫手段? 第1页

  

user avatar   Ivony 网友的相关建议: 
      

电商网站给假商品假价格都是公开的秘密了……

当然是只有爬虫可见的……


通常发现爬虫又不想被爬的时候,很多网站会选择拒绝请求,但也有很多网站会投毒,上面说的电商网站的策略就是一种经典的投毒手段。

更简单一点儿的还有给404欺骗爬虫这个页面不存在,给无穷跳转玩死爬虫等等……


当然这个事情应该说还是爬虫先动手的……毕竟爬虫经常骗网站自己是Chrome、Firefox什么的。为了避免被投毒,现在爬虫也有冒充自己是百度或者谷歌的蜘蛛的……




  

相关话题

  JVM 常量池中存储的是对象还是引用呢? 
  AO3 事件是否存在反转?实情是怎样的?从技术角度如何解释? 
  C#在开源框架的数量和质量上有希望追上JAVA么? 
  做主程序员是怎样的体验? 
  计算机专业必读哪些经典书籍? 
  程序员5年攒两千万很难吗? 
  为什么程序员变得厉害了多数都移民美国了? 
  你是如何开始能写 Python 爬虫? 
  如何看待风变编程的 Python 网课? 
  如何看待千锋教育在全网开源自己的全学科教学视频? 

前一个讨论
美联航是一家怎样的航空公司?为什么口碑这么差?
下一个讨论
波函数坍塌是否一定和意识有关?





© 2025-04-05 - tinynew.org. All Rights Reserved.
© 2025-04-05 - tinynew.org. 保留所有权利