你在写python爬虫时有啥有用的经验
非职业养虫师。说点我的想法,旨在抛砖引玉,欢迎指正。1,尽可能的低频率,单线程。2,尽可能的伪装正常访问,无论对方是否有反爬策略。3,重复使用的数据,本地保存,不要每次用都爬。4,尊重他人劳动成果,发布整理研究后的数据时,请获取数据来源授权。
■网友
抓包分析的时候,一定要浏览器的隐身模式下进行。
推荐阅读
- 怎样成为一名合格的Python程序员?
- python 爬虫,咋获得输入验证码之后的搜索结果
- 还记得,那些年5点钟就起床的你吗?
- python的html5lib这个库咋使用啊我在网上也没有找到相关文档
- 零基础入门学习啥语言好
- Python3.4和3.5区别大么
- python 中 def_():...... return _有啥作用
- 新互联网网站用Java还靠谱么对比Php,Python,Ruby的话
- 30岁男,创业失败转行学python,是否很晚?也不好找工作?
- Python 的开发速度比 C#.net 或 Vb.net 更快吗?
