12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?

2025-06-21 23:05:11

你当然可以爬12306。

要不携程飞猪去哪网这些的数据是哪来的。

这种爬虫反而给12306省流量。

因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。

而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。

不过你要是一天爬它几亿次,就别怪晶哥抓你了。

12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
广告位810*200
相关阅读
Manus会不会开源?

Manus会不会开源?

Manus是否开源已经没有那么重要了。 。 。 。 。 。 ...

2025-06-25
Rustaceans 掀起了 Rust 重写热潮,我们 J***aer 为何不搞个 J***a 重写热潮?

Rustaceans 掀起了 Rust 重写热潮,我们 J***aer 为何不搞个 J***a 重写热潮?

感谢rust,感谢go,近几年流行的中间件或者基础设施,但凡...

2025-06-25
怎么隔离dify和RAGflow ?

怎么隔离dify和RAGflow ?

本地部署RagFlow适配Dify需要适配的原因:ragfl...

2025-06-25
如何一眼看出两个人私下里发生了秘密关系?

如何一眼看出两个人私下里发生了秘密关系?

我给你们讲一个不是看出来,是听出来的案例。 我跟我媳妇上学...

2025-06-25
obsidian用一两年后会有多大?全文搜索还快吗?

obsidian用一两年后会有多大?全文搜索还快吗?

用内存虚拟化方案就可以了。 因为 Obsidian 对于 ....

2025-06-25