12306 網(wǎng)站的根目錄下為什么連 robots.txt 文件(反爬蟲協(xié)議)都沒有?
作者: 發(fā)布日期:2025-06-22 02:15:10
你當(dāng)然可以爬12306。
要不攜程飛豬去哪網(wǎng)這些的數(shù)據(jù)是哪來的。
這種爬蟲反而給12306省流量。
因?yàn)槿绻麤]有第三方網(wǎng)站,所有查火車信息的流量(哪怕不買票)就都得是12306接收。
而這些網(wǎng)站雖然在搶票的時(shí)候會(huì)浪費(fèi)一些流量(卡放票時(shí)間反復(fù)刷票),但是如果有人只查票不買票,則對(duì)12306的流量消耗為0。
不過你要是一天爬它幾億次,就別怪晶哥抓你了。
。









