新闻动态
新闻动态
- 民航局紧急通知禁止携无 3C 标识及被召回的充电宝乘境内航班,无 3C 标识充电宝有哪些安全隐患?
- 为什么软件公司很少用python开发web?
- 为什么美军B2实战以后有人认为一部分网友又没信心了?
- 5070ti什么时候才能回归正常价格?
- 超小团队选择Django还是Flask?
- 如何看待掘金考虑交易约基奇?
- 2025年现在开发php项目选择lar***el框架好还是thinkphp框架好?
- 西班牙拒绝执行北约提高军费开支至GDP 5%的目标,透露哪些信息?
- Linux 图形用户界面的原理是什么?
- 能够自己一个人创业的全栈web码农fullstack developer要会哪些技术?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-22 17:00:16 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-27 01:20:17有哪些是你用上了mac才知道的事?
-
2025-06-27 01:50:15真的有这种又苗条身材又爆炸的么?
-
2025-06-27 02:25:15Anthropic 推出的 Claude Code Agent 有哪些亮点值得关注?
-
2025-06-27 01:35:15实体店为什么生意越来越难做了?
-
2025-06-27 02:20:15Linux 图形用户界面的原理是什么?
-
2025-06-27 01:35:15能够自己一个人创业的全栈web码农fullstack developer要会哪些技术?
相关产品