这个网站是咋反爬虫的,我该咋办?
headers = {\u0026#39;Accept-Language\u0026#39;:\u0026#39;zh-CN,zh;q=0.8,en-US;q=0.5,en;q=0.3\u0026#39;} 加上这个就行了
■网友
【这个网站是咋反爬虫的,我该咋办?】 

这个网站我也试过,刚开始就是用headers,但是403,并不是频率的问题。主要是headers要全面,这样是可以返回数据的。
■网友
你可以先测试下频率,多块的频率会被认为是爬虫。然后确保你的headers和ff的headers是完全一样。
■网友
我猜是网站设了单位时间内同IP访问的上限。可以在爬虫里加上扒了几个页面后暂停一会儿再继续,也可以设置扒几次以后就换IP,几个IP来回切换着用。
推荐阅读
- 如果你的多肉出现这个长势,要注意这个细节,多肉才会越来越美!
- 『活动』让孩子们欢欢喜喜过新年 这个元旦好有爱!南京聋校举办多种形式庆祝活动
- 免费“单人套餐”背后的故事:爱心让这个冬天不再寒冷
- 夫子庙■“秦淮灯会”“夫子庙小吃”等非遗重点保护 护航夫子庙,这个法明年施行
- 气温■@江苏人,这个周末天气晴!温度缓慢回升,早晚依旧“冻”人
- 黄金时间■黄金时间丨哪种产品最节水?购买产品请注意这个标识!
- 『黄金时间』请认准这个蓝色的标志! 黄金时间丨同行业中用水最少的企业
- 汽车|评测 | 懂你所想,予你所需!依维柯欧胜2021款这个“搭档”可还行?
- 电动车|这个月,原来小编们这么拼
- 有啥方法,网站,项目可以自己练习计算广告学
