有哪些有趣的反爬虫手段？ 第1页
1
Ivony 网友的相关建议:
电商网站给假商品假价格都是公开的秘密了……
当然是只有爬虫可见的……
通常发现爬虫又不想被爬的时候，很多网站会选择拒绝请求，但也有很多网站会投毒，上面说的电商网站的策略就是一种经典的投毒手段。
更简单一点儿的还有给404欺骗爬虫这个页面不存在，给无穷跳转玩死爬虫等等……
当然这个事情应该说还是爬虫先动手的……毕竟爬虫经常骗网站自己是Chrome、Firefox什么的。为了避免被投毒，现在爬虫也有冒充自己是百度或者谷歌的蜘蛛的……
1
相关话题
如何开始学习 Rust 语言?为什么我觉得程序员挣的那么多反而很节省？
项目组里的代码审查员要我把代码写的很啰嗦，怎么办？
如何学习数据结构？
为什么有些人宁愿花费很多时间去自己手工配置Python环境, 也不用Anaconda?
如何看待博客园的整改公告？
python setup.py data_files 设置要拷贝的文件，不能拷贝到安装目录下。要怎样解决？
如何寻找热爱编程而且有经验的程序员？
怎么看c#排行飙这么高？
怎样反驳「程序 = 算法 + 数据结构」的言论？
前一个讨论
美联航是一家怎样的航空公司？为什么口碑这么差？
下一个讨论
波函数坍塌是否一定和意识有关？
相关的话题
如何看待 Google 2004 年在硅谷公路旁一巨型广告牌上贴出的那道数学题用于招聘？知乎上为什么学历歧视那么严重？
作为一名程序员，该如何提升自己的核心竞争力和不可替代性?
对于程序员来说， Warning 真的不重要吗？
站在 2020 年回看，如何评价 Python 2 到 3 的升级？
一个程序员多年累计编写一百万行代码是什么体验？
为什么苹果新语言 Swift 的 RC4 运算效能是 Python 的 220 倍？
如何看待「普通医生迟早被计算机替代」的观点？
名校计算机专业出来的只能当苦逼的程序员吗?
有哪些程序员才懂的梗？
有哪些评判标准能判断一段代码写得「好」还是「不好」？
如何判断一个人的技术是否成熟?
如何评价「线程的本质就是一个正在运行的函数」?
为什么说 Java 比 C++ 安全？
在做程序员的道路上，你掌握了什么概念或技术使你感觉自我提升突飞猛进？
大龄青年（27 岁）去美帝转 CS master 有哪些坑？
Java 中一个对象a持有对象b中的静态常量，对对象b的回收有什么影响？
大型公司里面如何防止程序员接触到核心代码？
程序员的工资一直这么高吗？有没有人分析一下程序员工资在不同年代的变化及未来变化趋势？
1024 程序员节即将到来，在你看来程序员最需要得到哪些保障和关怀？
湾区码农都开什么车？
为什么不使用 scrapy，而是从头编写爬虫系统？
普通程序员如何正确学习人工智能方向的知识？
那些把公司当家的程序员，后来怎么样了？
计算机标准时间中“上午11:59”和“上午12:01”之间隔了多长时间？是否有bug？
程序员行业有哪些越早知道越好的道理？
怎么让一个Java黑心甘情愿学Java？
如何看待观察者网言论：「没有吃青春饭的程序员，只有懒惰的程序员，保持积极学习的心态，是不会被淘汰的」？
程序员是怎么度过 1024 程序员节的？
你写过哪些真正生产可用的 Python 装饰器？