新闻动态
新闻动态
- 买到烂尾楼到底该有多绝望?
- 为什么腾讯云或者阿里云不让自建dns服务器?
- 能分享一下你写过的rust项目吗?
- 越正经的女人越容易做出疯狂的事吗?
- H264和H265谁画质好,求回谢谢!?
- 陈楚生第一,马嘉祺淘汰,如何评价《歌手 2025》第六期所有歌手的演唱?
- 想学编程,该不该买MacBook?
- 公司规定所有接口都用 post 请求,这是为什么?
- 腾讯开源的 libco 号称千万级协程支持,那个共享栈模式原理是什么?
- 曾经的班花,现在还多少人惦记?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-22 13:15:16 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-21 10:40:18女生真正的完美身材是什么样子?
-
2025-06-21 09:45:18你们的腰突是怎么突然好的?
-
2025-06-21 10:40:18男朋友因为打游戏骗我去睡觉被我识破,然后我提了分手,他同意了,问问男孩子们他怎么想的?
-
2025-06-21 09:30:18国产数据库有什么坑?
-
2025-06-21 10:05:19docker怎么修改拉取源从指定的国内仓库拉取镜像?
-
2025-06-21 10:55:18服务器能否拒绝非浏览器发起的HTTP请求?
相关产品