新闻动态
新闻动态
- 为什么从事技术的人普遍都比较难沟通？
- 不懂就要问，为什么通讯如此发达的今天，还没有完全解决进电梯就没信号的问题？
- Rust1.86才正式稳定trait的upcast，为什么在rust中这个特性实现如此复杂？
- H264和H265谁画质好，求回谢谢！？
- count(*) count(1)哪个更快？
- 极度疲劳下，人一次最多能睡多久？
- MySQL 面试中常见的问题有哪些？
- 网友称在桔子水晶酒店洗漱包内发现用过的 四联检测盒，具体是怎么回事？酒店要承担哪些责任？
- 为什么个人需要公网ip？
- 为什么都对TLC乃至未来的QLC嗤之以鼻呢?
联系我们
邮箱：youweb@qq.com
手机：13988888888
电话：020-88888888
地址：广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件（反爬虫协议）都没有？
作者：admin 发布时间：2025-06-22 14:50:16 点击：
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站，所有查火车信息的流量（哪怕不买票）就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量（卡放票时间反复刷票），但是如果有人只查票不买票，则对12306的流量消耗为0。
不过你要是一天爬它几亿次，就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-18 00:05:12如何评价剪映svip，599一年，有替代方案吗？
-
2025-06-19 18:10:16Android 开发时你遇到过什么相见恨晚的工具或网站？
-
2025-06-18 00:05:12核武器真的有宣传中那么牛逼吗？
-
2025-06-19 18:20:16你怎么看待剪映收费过高问题？
-
2025-06-18 00:10:12能分享一下你写过的rust项目吗？
-
2025-06-19 19:05:16马上领证了，发现男朋友离不了游戏，让他少打游戏他会非常生气，正常吗？
相关产品
