新闻动态
新闻动态
- 我是新手想养鱼，预算不超过200。有什么好的建议或者禁忌吗。？
- 只是突然很好奇，已经造出了三艘航母，为何不能按照这样的模板，批量建造航母呢?
- 如何评价苹果 3 月 5 日发布的 MacBook Air M4，相比前代有哪些提升？
- 老饭骨做的饭真的好吃吗 ?
- 《欢天喜地七仙女》中 「仙女下嫁凡人」 的设定，在今天是否过时？
- 可以用duckdb在本地建立一个数据库对外服务吗？
- 如何电脑下载Adobe audition?
- Firefox是如何一步一步衰落的？
- LABUBU为啥这么火?
- postgresql也很强大，为何在中国大陆，mysql成为主流，postgresql屈居二线呢？
联系我们
邮箱：youweb@qq.com
手机：13988888888
电话：020-88888888
地址：广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件（反爬虫协议）都没有？
作者：admin 发布时间：2025-06-22 12:40:16 点击：
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站，所有查火车信息的流量（哪怕不买票）就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量（卡放票时间反复刷票），但是如果有人只查票不买票，则对12306的流量消耗为0。
不过你要是一天爬它几亿次，就别怪晶哥抓你了。
。
- 上一篇： 上一篇 : 为什么要在鱼缸里养水草？
- 下一篇： 下一篇 : ***拍大尺度片子时摄影师不会看光吗？
新闻资讯
-
2025-06-21 06:15:16超小团队选择Django还是Flask？
-
2025-06-21 05:50:16京东 CEO 称一线城市京东外卖全职骑手人均收入 1.3 万元，这属于什么水平？外卖员收入过万难不难？
-
2025-06-21 06:20:15字节大量使用新语言，包括go，rust等，为什么阿里一直都抱着j***a不松手？
-
2025-06-21 06:15:16陈楚生第一，马嘉祺淘汰，如何评价《歌手 2025》第六期所有歌手的演唱？
-
2025-06-21 07:20:16如何看待多地开展查摆年轻干部玩心重、混日子、说话随意、口大气粗等问题的行动？
-
2025-06-21 07:20:16为什么中国主机带宽比美国贵5倍（原来错误的10000倍），比如阿里云？
相关产品
