python 怎样爬韩语景点网站
爬网站和对方的语言没太大关系,你编码调整成网页一样的编码就可以了。其他和爬中文网站是一样的。
■网友
采集的原理都是一样的
只是你不想用正则,不想动态验证
【python 怎样爬韩语景点网站】 真可以吗
■网友
爬取信息和网站的语言没有什么关系。基本步骤都是:
请求目标网站,获取响应体使用HTML解析器解析响应体分析目标内容在网页中的位置使用CSS选择器等方式选出目标内容但是,如果目标网站的内容是使用JS等方式加载的话,这个套路就不适用了。很不幸,我看了一下这个韩语网站,它的内容就是使用JS加载的。
这个时候有两个方案。
找到它的数据接口,直接请求数据接口获取数据,这个一般不好弄,可以先试试。使用Headless浏览器加载页面,等数据全部加载好以后,再进行爬取,比如(GoogleChrome/puppeteer)。这个是终极方案,没有这个爬不了的网站。
推荐阅读
- 聪明人养花,这3种“花”怎样也要养一盆,每年能省不少医药费
- 互联网怎样解决“家政服务上门速度慢”的问题
- 怎样看待从1月8号起,QQ钱包开始提现收费
- 银行it人怎样转型
- 汽车|冬天怎样让车内温度快速升高?座椅加热的最佳使用方式二,外循环的作用总结
- 怎样进入通信行业
- 怎样评价扶他柠檬茶的小说《云养汉》的结尾
- 怎样成为一名合格的Python程序员?
- 怎样评价华为、诺基亚、中兴中标中国移动高端路由交换设备扩容集采
- 怎样评价类似前橙会、百老汇、南极圈这样类型的离职帮抱团,对企业的积极意义和消极意义
