12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?

你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
这个问题吸引到了我,一下子让我梦回青春,当年《梦幻***馆》...
***来源于网络,侵删。 尊重版权,这些***仅供个人学习...
我的天,真的爆炸了!而且非常严重!更新一下:天亮了,经过一晚...
windows就是个笑话系统~ 说win大内存。 和内存管理...
2024汛期,从北京来的大水过境到天津,天津竟然不敢开闸放水...
我觉得反驳弃用的人没有想明白两个问题: 1、如何证明Mong...
如果你老板要求不高的话,还可以抢救一下,但是也得学一段时间 ...
不应该在乎这些东西,因为你怎么样都有别人攻击你的点,露出内衣...
在线急寻那位当时和我坐对面的空乘小姐姐,还想听一次你那如此“...
我搜到的日本AV基本都是免费的 ***,分类,有剧情,时长都...