新闻动态
新闻动态
- 为什么欧美影视喜欢露点？
- 世界上哪款战斗机最好看？
- 吴柳芳的真实水平如何？
- Gemini 2.5 Flash 和Pro稳定版上线，和之前版本相比，在性能和应用场景上有哪些提升？
- Windows的伟大之处在哪里？
- 有邻居的追求者出价三万，让我连续半个月每天找个女朋友晚上弄点动静，我该答应吗？
- 有没有一个特别好用的Linux系统？
- 从零写一个3D物理引擎难度多大?
- 男人为什么到了一定年纪就喜欢喝酒？
- 新手想要打好篮球，主要练运球还是投篮？
联系我们
邮箱：youweb@qq.com
手机：13988888888
电话：020-88888888
地址：广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件（反爬虫协议）都没有？
作者：admin 发布时间：2025-06-22 13:15:16 点击：
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站，所有查火车信息的流量（哪怕不买票）就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量（卡放票时间反复刷票），但是如果有人只查票不买票，则对12306的流量消耗为0。
不过你要是一天爬它几亿次，就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-20 23:05:16用 node 写后端存在什么问题？
-
2025-06-20 23:30:15如果你是《一帘幽梦》里的绿萍，你会不会最后原谅紫菱？
-
2025-06-21 00:15:17为何山东在齐鲁之后存在感降低？
-
2025-06-21 00:05:17今天面试第五家公司被拒，面试官说我你技术没问题，但35岁要25k，不如招2个应届生，我该如何应对？
-
2025-06-20 22:40:16你在出租房屋发现过什么前租客留下的“宝藏”？
-
2025-06-21 00:30:18snipaste怎么安装?
相关产品
