百科问答小站 logo
百科问答小站 font logo



有哪些有趣的反爬虫手段? 第1页

  

user avatar   Ivony 网友的相关建议: 
      

电商网站给假商品假价格都是公开的秘密了……

当然是只有爬虫可见的……


通常发现爬虫又不想被爬的时候,很多网站会选择拒绝请求,但也有很多网站会投毒,上面说的电商网站的策略就是一种经典的投毒手段。

更简单一点儿的还有给404欺骗爬虫这个页面不存在,给无穷跳转玩死爬虫等等……


当然这个事情应该说还是爬虫先动手的……毕竟爬虫经常骗网站自己是Chrome、Firefox什么的。为了避免被投毒,现在爬虫也有冒充自己是百度或者谷歌的蜘蛛的……




  

相关话题

  为什么很多程序员对string的执行效率耿耿于怀? 
  程序员为了期权加入创业公司,值得吗? 
  程序员年龄增大后的职业出路是什么? 
  Java程序员,最常用的20%技术有哪些? 
  程序员所积累的编程知识在十年后将有多少变得没用? 
  如何评价中科院计算所发布的「木兰」编程语言体系? 
  如何看待 IBM 裁减 40 岁以上员工,聘用年轻员工,目标是实现创新? 
  为什么前端不能一直做?难道要转行?? 
  知乎公司的测试工程师的待遇有多差? 
  程序员在 35 岁后绝大多数都会被淘汰吗? 

前一个讨论
美联航是一家怎样的航空公司?为什么口碑这么差?
下一个讨论
波函数坍塌是否一定和意识有关?





© 2025-01-30 - tinynew.org. All Rights Reserved.
© 2025-01-30 - tinynew.org. 保留所有权利