新闻动态
新闻动态
- 如果让你来领导蒙古,你要怎么做来使蒙古再次伟大?
- 为什么开发一个 AI Agent 看似容易,但真正让它「好用」却如此困难?技术瓶颈主要在哪里?
- 颠覆空调形态,美的无外机嵌入式厨房空调新品是黑科技还是噱头?
- 怎么评价湾湾陆海空人员对未来台湾战事的态度?
- 歼-20 在国际上到底是什么地位?
- 2029届全运会落地长沙,会对长沙有什么新的变化吗?
- 为什么 IPv6 在国内至今未得以大规模应用?
- 以色列为什么要打伊朗?
- 台湾人对南京人有特殊情结吗?
- 我的世界怎么租一个四个人的服务器?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-22 13:15:16 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
- 上一篇: 上一篇 : 为什么现在流行吹警校??
- 下一篇: 下一篇 : 我的世界怎么租一个四个人的服务器?
新闻资讯
-
2025-06-20 13:20:17商业史上有哪些降维打击的经典案例?
-
2025-06-20 12:15:18大连天空现罕见「窟窿云」,目击者称持续半小时,压迫感十足,窟窿云是怎么形成的?你见过吗?
-
2025-06-20 12:50:18如何看待:“伊朗国家电视台:今晚会发生一件大事,世界将铭记几个世纪”?
-
2025-06-20 13:05:18你的低成本爱好是什么?
-
2025-06-20 13:10:17为什么 Windows 没有比较成熟的第三方桌面环境(explorer.exe)?
-
2025-06-20 12:10:17外贸独立站怎么做SEO?
相关产品