新闻动态
新闻动态
- 为什么QQ上的网络状态没有了?
- MySQL不香吗,为啥还要Elasticsearch?
- 网络小白如何建立一个网站,供别人下载文件(主要是PDF和MP3)?
- Caddy 和 Nginx 比有哪些优点和缺点?
- 各位都在用Docker跑些什么呢?
- 如何看待rust编写的zed编辑器?
- 有哪一个瞬间让你对女朋友彻底失望?
- 055一打一能不能打过阿利伯克?
- 颜值比较高的日本女明星有哪些?
- 自己拥有一台服务器可以做哪些很酷的事情?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-22 02:45:15 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-20 08:35:17为什么 mac mini 的 m4 版本价格这么低呢?
-
2025-06-20 08:05:16中国军队有多强,在世界能排第几?
-
2025-06-20 09:10:17为什么中国的英语教育这么失败?
-
2025-06-20 08:45:16国产手机AI「好用」的背后,是技术差距还是文化差异?
-
2025-06-20 09:30:18为什么感觉全世界只有中国会吃竹笋?
-
2025-06-20 08:45:16你在出租房屋发现过什么前租客留下的“宝藏”?
相关产品