新闻动态
新闻动态
- 瑜伽裤和牛仔裤哪个更显身材?
- 鱼缸哪里买比较便宜呢?
- 马斯克宣布星舰将配备 42 台发动机,如何评价这一设计?
- 为什么大家不再提星链了(包括外网)?
- 南京六大高中是哪六大?
- UBI(Universal basic income,全民基本收入)可行吗?
- 为什么 macOS 并不差,可市场总敌不过 Windows?
- 我国的军工能力可以实现一天5000枚火箭弹连着炸三个月吗?
- 蜂鸟音乐指控邓紫棋侵权,要求 48 小时内下架重录歌曲,邓紫棋回应「不会下架」,这一指控合理吗?
- 同样是对标安卓系统,为什么谷歌的Fuchsia死了,而华为的鸿蒙却愈发壮大?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-22 13:50:16 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-20 00:50:15华为鸿蒙还有多久可以在pc桌面取代Windows?
-
2025-06-20 00:40:17公司规定所有接口都用 post 请求,这是为什么?
-
2025-06-20 01:35:15如何评价宝鸡这个城市?
-
2025-06-20 01:20:15老板说我设计了一周的海报还是不行,我到底该怎么学啊?
-
2025-06-20 01:30:15媒体称以色列防空成本一晚近 3 亿美元,最多再撑 12 天,美方会支援吗?若无美补给结果会如何?
-
2025-06-20 01:30:15为什么腾讯地图不如百度地图成功?
相关产品