百科问答小站 logo
百科问答小站 font logo



有哪些有趣的反爬虫手段? 第1页

  

user avatar   Ivony 网友的相关建议: 
      

电商网站给假商品假价格都是公开的秘密了……

当然是只有爬虫可见的……


通常发现爬虫又不想被爬的时候,很多网站会选择拒绝请求,但也有很多网站会投毒,上面说的电商网站的策略就是一种经典的投毒手段。

更简单一点儿的还有给404欺骗爬虫这个页面不存在,给无穷跳转玩死爬虫等等……


当然这个事情应该说还是爬虫先动手的……毕竟爬虫经常骗网站自己是Chrome、Firefox什么的。为了避免被投毒,现在爬虫也有冒充自己是百度或者谷歌的蜘蛛的……




  

相关话题

  为什么有人可以在屎一样混乱的几千行代码里加功能?不重构能驾驭屎山吗? 
  逃逸分析为何不能在编译期进行? 
  如何看待哔哩哔哩的 flv.js 作者月薪不到 5000 元? 
  为什么我一个程序员朋友的闹钟不是整点的? 
  开源与共产主义的本质区别是什么? 
  非计算机系学Python有什么建议? 
  你见过哪些令你瞠目结舌的 Python 代码技巧? 
  自学 Python 之后如果不去公司上班,自己一个人可以通过此技能挣什么钱? 
  研一刚入学,从未接触过神经网络,python也是才开始学,现在导师要我做LSTM,我应该去学什么? 
  Node.js是用来做什么的? 

前一个讨论
美联航是一家怎样的航空公司?为什么口碑这么差?
下一个讨论
波函数坍塌是否一定和意识有关?





© 2024-11-21 - tinynew.org. All Rights Reserved.
© 2024-11-21 - tinynew.org. 保留所有权利