百科问答小站 logo
百科问答小站 font logo



有哪些有趣的反爬虫手段? 第1页

  

user avatar   Ivony 网友的相关建议: 
      

电商网站给假商品假价格都是公开的秘密了……

当然是只有爬虫可见的……


通常发现爬虫又不想被爬的时候,很多网站会选择拒绝请求,但也有很多网站会投毒,上面说的电商网站的策略就是一种经典的投毒手段。

更简单一点儿的还有给404欺骗爬虫这个页面不存在,给无穷跳转玩死爬虫等等……


当然这个事情应该说还是爬虫先动手的……毕竟爬虫经常骗网站自己是Chrome、Firefox什么的。为了避免被投毒,现在爬虫也有冒充自己是百度或者谷歌的蜘蛛的……




  

相关话题

  医生真的比程序员好吗? 
  为什么很多人都说 Python 简单? 
  要学 Python 需要怎样的基础? 
  知乎上为什么学历歧视那么严重? 
  程序员在上班的时候允不允许大量的看说明文档来帮助写程序? 
  程序员为何高薪? 
  广州的CVTE为什么校招给的薪资这么高? 
  为什么 Java 总被黑? 
  为何在AI领域Java没有python火? 
  用爬虫程序抓取其它公司用户发布的内容,并发布在自己的平台,构成侵权吗,是对谁的侵权? 

前一个讨论
美联航是一家怎样的航空公司?为什么口碑这么差?
下一个讨论
波函数坍塌是否一定和意识有关?





© 2024-11-21 - tinynew.org. All Rights Reserved.
© 2024-11-21 - tinynew.org. 保留所有权利