新闻动态
新闻动态
- 为什么同样是输球,常州和国足的风评却差那么多呢?
- 为什么新流行的开源编辑器都在用Rust开发?
- 写代码的时候总是考虑太多怎么办?
- 如何评价腾讯元宝桌面端使用 Rust 的 Tauri 框架?
- 为什么我觉得诛仙写的不怎么样?是我层次太低么?
- node 项目中如何使用 Node Schedule 创建定时任务?
- 为什么国人普遍不接受月付的订阅制而喜欢一口价买断制呢?
- 如何看待人口学家称反婚反育言论泛滥成灾,严重危害公共利益和国家人口安全?
- 有什么是你去了上海才知道的事情?
- Rust开发Web后端效率如何?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-22 02:45:15 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
- 上一篇: 上一篇 : 中年女性如何保持身材?
- 下一篇: 下一篇 : 如何搭建自己CDN服务器?
新闻资讯
-
2025-06-23 10:10:17我毕业想成为前端工程师,可是前端技术太多,越学越多,可是我想成为技术强的人,又很无助,怎么办?
-
2025-06-23 11:35:19未来几年,市场对 AI 人才的需求会集中在哪几个方向?
-
2025-06-23 11:15:18为什么QQ上的网络状态没有了?
-
2025-06-23 10:20:17Rust 使用 Result 的错误处理方式与 Golang 使用 error 的方式有什么本质区别?
-
2025-06-23 10:15:17本人处女,非常不明白为什么男的有处女情结?
-
2025-06-23 10:20:17为什么女游泳运动员看起来大部分都是平胸?
相关产品