12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?

2025-06-22 04:35:14

你当然可以爬12306。

要不携程飞猪去哪网这些的数据是哪来的。

这种爬虫反而给12306省流量。

因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。

而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。

不过你要是一天爬它几亿次,就别怪晶哥抓你了。

12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
广告位810*200
相关阅读
现在工作中k8s是使用containerd还是docker来管理容器?

现在工作中k8s是使用containerd还是docker来管理容器?

今时今日,只有containerd. 因为Docker在1....

2025-06-21
汉语是牺牲了什么,才成为世界最紧凑、最高效的语言?

汉语是牺牲了什么,才成为世界最紧凑、最高效的语言?

流传甚广的联合国宪章最薄我没看过,但今天看了一个联合国决议,...

2025-06-21
一名女子在杭州万象城遭挟持被捅 20 多刀,隆胸***体救了一命,这反映出哪些公安系统的问题?

一名女子在杭州万象城遭挟持被捅 20 多刀,隆胸***体救了一命,这反映出哪些公安系统的问题?

杭州警察之前还有一个上大分的操作,直接给网约车司机打电话,让...

2025-06-21
SQL Server 真的比不上 MySQL 吗?

SQL Server 真的比不上 MySQL 吗?

这俩都用过,现在也一直在分别用。 大概七八年前,突然有台阵...

2025-06-21
为什么国外网站总喜欢弹出cookie访问权限弹窗,国内网站却没有,这么做有什么意义?

为什么国外网站总喜欢弹出cookie访问权限弹窗,国内网站却没有,这么做有什么意义?

以前我是神烦这种cookie弹窗的。 自己做海外网站设计的时...

2025-06-21