汽车之家的口碑不能正常采集了( 二 )
■网友
这两天也在研究这个,了解到可以执行js来获取伪元素属性。然后就想尝试用python的driver来执行js,但是又不知道怎么把获取的结果返回到python。然后又了解了PyV8,这个貌似可以返回结果到python,但是我又不知道怎么把网址掉入,哎,我一个zha?zha
■网友
推荐使用八爪鱼采集器采集汽车之家口碑数据,八爪鱼内置了【汽车之家-口碑】简易模板,可有效破解汽车之家的css替换文字的反爬。
八爪鱼简易模板的使用方法非常简单:只需输入相应的车型ID,点击“启动任务”,即可轻松获取到口碑页面的全部字段。


■网友
确实是,用的CSS伪元素伪装了部分形容词名词以及标点符号,我也正在想解决办法
■网友
楼主可以看下这个
反爬虫破解系列-汽车之家利用css样式替换文字破解方法 - 星光海豚 - 博客园
■网友
他说的很对, 代码好说, 关键是ip代理, 想不花钱不太可能, 需要买个代理.
第一种方法:
用Python+PyV8, 用v8把js混淆的部分得到, 然后替换字体就可以
Python爬取最新反爬虫汽车之家口碑 - zz153417230的博客 - CSDN博客汽车之家口碑的反爬又变了,怎么破啊?第二种方法:
从移动端爬取内容, 省掉了一步破解js混淆,相对简单.
移动端爬取的代码使用Java写的,也不难,就不贴出来了.
■网友
建议使用瑞雪采集云进行数据采集:
瑞雪采集云第一个支持java和python的企业级的开发平台。
瑞雪采集云的特点:
1. 支持java和python
2. 采集效率高
3. 分布式
4. 任务管理机制强大
5. 部署简单易用
6. 自动学习机制
7,费用低
【汽车之家的口碑不能正常采集了】 http://web2data.com
■网友
别听大家瞎说,之家口碑只要内容及相关发布操作到位,还是可以被抓取的
推荐阅读
- 铜仁■江苏苏州:“铜仁之家”的“温暖异乡年”
- 南京■南京长途汽车东站12月28日起恢复发车
- 子良说汽车|崔克“唯一”的车型?TREK Domane进化史
- 汽车|马自达全新CX-5曝光!搭直列六缸引擎/后驱平台
- 汽车|8款新车12月份上市,开回家过年很有面子
- 汽车|9万不到的SUV 居然有197马力 而且还有大空间7座!
- 汽车|续航里程410km 华晨新日新能源汽车首车下线
- 汽车|评测 | 懂你所想,予你所需!依维柯欧胜2021款这个“搭档”可还行?
- 汽车知识|凯美瑞2.0L落地近22万,动力差,优惠少,但就是销量高!
- 汽车市场|品牌与性价比亦可兼得 实拍奥迪Q2L
