新闻动态
新闻动态
- 有没有好看的个人博客的设计?
- 黄金,今年会达到怎样的高度?
- 为什么国人普遍不接受月付的订阅制而喜欢一口价买断制呢?
- 媒体称以色列防空成本一晚近 3 亿美元,最多再撑 12 天,美方会支援吗?若无美补给结果会如何?
- 为什么欧美影视喜欢露点?
- 前端,后端,全栈哪个好找工作?
- 你用过的最好记笔记工具是什么?
- 如何评价鸿蒙电脑无法编写其自身运行的程序?
- 作为一个服务器,node.js 是性能最高的吗?
- 哪张照片让你觉得刘亦菲美得不可方物?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-22 13:50:16 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-20 20:20:16为什么微软会允许中国有那么多盗版?
-
2025-06-20 20:20:16《三角洲行动》还能活多久?
-
2025-06-20 20:50:15群晖 nas 有些什么基本和好玩的功能?
-
2025-06-20 20:10:16为什么 mac mini 的 m4 版本价格这么低呢?
-
2025-06-20 20:25:15大家猜猜伊朗的结局如何?
-
2025-06-20 20:15:16江西通报救护车 800 公里收费 2.8 万「不合理,暂停医院转运服务」,该医院要承担怎样的法律责任?
相关产品