Python 爬虫 怎样爬第二页的内容

【Python 爬虫 怎样爬第二页的内容】 通过八爪鱼采集器来做,点击下一页,选择“循环点击下一页”,一个简单的鼠标操作就可以翻页采集了,不需要研究什么get,post,什么参数之类的。楼主可以试试,免费版就行。

■网友
谢邀~简单用postman试了一下,应该做了防爬虫机制,只是简单的把参数post会出现 403的,你可以试试 selenium 这个库
■网友
翻页的实现是通过post方法,还是ajax跳转你需要搞明白,如果是post方法,你就得在请求中带上formdata参数,ajax的话考虑找到api或者使用selenium,就你现在的情况看来,应该是第一种情况,你应该在请求中带上你的formdata
■网友
用Fiddler抓包看看,参数里面一般会有翻页的参数


    推荐阅读