你在写python爬虫时有啥有用的经验

非职业养虫师。说点我的想法,旨在抛砖引玉,欢迎指正。1,尽可能的低频率,单线程。2,尽可能的伪装正常访问,无论对方是否有反爬策略。3,重复使用的数据,本地保存,不要每次用都爬。4,尊重他人劳动成果,发布整理研究后的数据时,请获取数据来源授权。
■网友
抓包分析的时候,一定要浏览器的隐身模式下进行。


    推荐阅读