同一个url下有多个翻页用Python咋爬
通常是post数据到某个地址,可以通过chrome的开发者工具查看.
■网友
抓包。请看python爬虫之采集搜素引擎联想词_土豆_高清视频在线观看
■网友
区别页数的参数极有可能在form data里面，F12看一下
■网友
这个问题的本质实际是说如何让服务器能明白你需求的是什么数据
这个问题并不是一个孤立的问题，首先需要了解在使用常规方式，也就是通过浏览器获取网页内容时，浏览器向服务器发送了什么，又得到了什么。
比如：
服务器在获取浏览器请求的内容时，服务器是通过获取post来的数据，还是GET时请求的参数作为查询条件去数据库搬运内容？
这些是请求数据时的问题。
又比如
服务器返回的内容是通过json返回后由页面中的js脚本加载到html中又还是直接返回html页面呢。
【同一个url下有多个翻页用Python咋爬】 其实确认了这些问题之后，这个问题已经解决一半了
推荐阅读
- 用EagleGet下载时总提示无效URL地址，无法下载，而用迅雷、QQ旋风则可以，咋回事~
- 有没有办法下有版权的歌
- 天下有车|怎么老司机基本是中午去加油？加油站员工说漏嘴，车主：涨知识了
- Wordpress新版4.8.1设置-常规里面域名url不可以更换
- 怎样看待知乎的非原创
- macOS 用PHP调用curl抓取不到https的数据
- MG|MG 领航：想要叫好又叫座，就得向主流靠拢
- 在同一个Excel表里做3个可筛选的折线图~感觉好复杂啊~〒_〒~?
- 天下有车|高速应急车道换胎扣12分？记好这几招，交警不但不罚，还帮着换！
- 有没有一种可能 同一个文件后缀改成.rmvb打开是一部电影，改成.avi是另一部电影