有哪些有趣的反爬虫手段？ 第1页
1
Ivony 网友的相关建议:
电商网站给假商品假价格都是公开的秘密了……
当然是只有爬虫可见的……
通常发现爬虫又不想被爬的时候，很多网站会选择拒绝请求，但也有很多网站会投毒，上面说的电商网站的策略就是一种经典的投毒手段。
更简单一点儿的还有给404欺骗爬虫这个页面不存在，给无穷跳转玩死爬虫等等……
当然这个事情应该说还是爬虫先动手的……毕竟爬虫经常骗网站自己是Chrome、Firefox什么的。为了避免被投毒，现在爬虫也有冒充自己是百度或者谷歌的蜘蛛的……
1
相关话题
关于Qt性能的损失，有没有一个可以量化的概念?知乎上这么多推崇学 Python 入 IT 行的，如果他们学完 Python 这一套找不到工作怎么办？
如何看待JetBrains 遭美国调查？
听说程序员日薪2000，程序员行情这么好的吗？
编程究竟难在哪？
为什么我觉得程序员挣的那么多反而很节省？
码农们最常说的「谎言」有哪些？
如何看待女友把一个程序员在GitHub上的repo和所有源代码删掉的行为？
开发web前端为什么用后端node(npm安装模块和webpack打包方式)?
土豪程序员的生活是怎样的？
前一个讨论
美联航是一家怎样的航空公司？为什么口碑这么差？
下一个讨论
波函数坍塌是否一定和意识有关？
相关的话题
如何看待这位百度员工的吐槽？如何看待 Reaktor Hello World 卫星将搭载 node.js 程序?
如何看待GitLab（商业版）把图标修改为乌克兰国旗？
各个编程语言都有哪些「亮点」？
有哪些适合放在程序员办公桌上的高逼格物件？
学习java开发，应该重视哪些部分？
为何网上充斥着程序员们各种“主义”之争？
开发一个类似IDEA的Java IDE有多难？
如何追到湾区码农小哥哥?
如何设计出一些优雅的API接口呢？
程序员远程办公在二三线城市陪女友和家人是一种什么体验？
深圳有没有类似于车库咖啡的创业者聚集的地方？
作为一个有理想的程序员，必读的书都有哪些？
对于大部分人而言，程序员干20年能抵得上公务员一辈子的收入吗？
为什么很少看到计算机类专业学生或者程序员进入《最强大脑》？
为什么现在招聘C++程序员这么难？
中国的软件为什么没有国外的发达？
Github、Node、React、pytorch 等官网声明支援乌克兰，如何看待开源组织参与政治?
软件工程本科分方向，.NET和Java选哪个好?
大专出身，学java的工资会比其他行业工资高么？从事两年后月薪八千左右是正常水平？
求助，大一学Java还是C#？
国外发达国家码农是真混得好么，难道没有什么缺点吗，请在国外的码农客观讲讲缺点，谢谢大家？
怎么写出一本程序员风格的修真小说？
创业公司如何能吸引一名优秀的 Python 开发者？
多用组合少用继承中，接口继承算不算一种组合？
在2019年这个时候，总体而言，Python程序员是不是编程水平最差的程序员？
这样漂亮的科研结果展示横向柱状图怎么画？
Python如何修改内置类型？
python怎么去掉最大值和最小值，怎么找到最大值与最小值，去掉最大值最小值比如下面这道题?
程序员和产品经理哪个有前途？