新闻动态
新闻动态
- 你最近有什么烦心事吗?把这里当树洞,说出来,可以吗?
- 伊以的对轰证明伊朗似乎没那么菜!美国会下场吗?
- 江西通报救护车 800 公里收费 2.8 万「不合理,暂停医院转运服务」,该医院要承担怎样的法律责任?
- 公立医生帮联系民营救护车,800 公里收费 2.8 万元,收费合理吗?救护车收费标准是什么?
- REDMI K80 至尊版手机搭载 7410mAh 电池,此款手机有哪些亮点?
- Rust 使用 Result 的错误处理方式与 Golang 使用 error 的方式有什么本质区别?
- 中国军事力量有希望达到全球第一吗?
- 如何实现电脑定期自动热备份?
- 有哪些是你用上了mac才知道的事?
- 为什么前端精通Node.js的人这么少?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-21 23:35:16 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-21 11:30:18程序员空闲时间应该继续卷技术,还是找其他副业?
-
2025-06-21 11:45:18如何评价字节跳动开源的 HTTP 框架 Hertz ?
-
2025-06-21 11:35:17网友称在桔子水晶酒店洗漱包内发现用过的四联检测盒,具体是怎么回事?酒店要承担哪些责任?
-
2025-06-21 13:00:17Linux里面usermod -L zhangsan命令是什么?
-
2025-06-21 11:35:17有没有GUI框架开发难度小,***消耗又不多,而且又跨平台?
-
2025-06-21 12:30:17地球上明明有吃塑料的虫子,为什么没有普及?
相关产品