新闻动态
新闻动态
- 国产手机APP为什么越来越臃肿?
- 大环境什么时候可以好?
- ***拍大尺度片子时摄影师不会看光吗?
- 如果将几百核心的服务器 CPU 当作 GPU 使用,会发生什么?
- 男子因眼睛小被小米汽车系统频繁误判疲劳驾驶,一路提醒20多次,这是智能汽车通病吗?怎么解决该 bug?
- 华为Pura 80首销遇冷,是否说明消费者已经开始对麒麟芯片性能有所觉醒?
- 你卡过最厉害的bug是什么?
- 为什么《歌手》不请周杰伦、陈奕迅、王菲、张学友、孙燕姿、梁静茹、王力宏、林俊杰当节目嘉宾?
- 作为一个服务器,node.js 是性能最高的吗?
- 网传广东怀集洪水后赵一鸣超市被哄抢,县***回应相关单位正在核实,若属实哄抢者该承担哪些法律责任?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-22 15:55:16 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-21 00:50:18为什么 IPv6 在国内至今未得以大规模应用?
-
2025-06-21 01:50:17如何评价《三角洲行动》***作者「三角洲经济学教父」?
-
2025-06-21 01:00:17Rust 是否会被美国国家安全局植入后门?
-
2025-06-21 00:55:17如何评价基努•里维斯的演技?
-
2025-06-21 00:40:17如何评价女明星梅根福克斯的身材?
-
2025-06-21 02:05:17有个亲妹妹是什么感觉?
相关产品