汽车之家的口碑不能正常采集了( 二 )


■网友
这两天也在研究这个,了解到可以执行js来获取伪元素属性。然后就想尝试用python的driver来执行js,但是又不知道怎么把获取的结果返回到python。然后又了解了PyV8,这个貌似可以返回结果到python,但是我又不知道怎么把网址掉入,哎,我一个zha?zha
■网友
推荐使用八爪鱼采集器采集汽车之家口碑数据,八爪鱼内置了【汽车之家-口碑】简易模板,可有效破解汽车之家的css替换文字的反爬。
汽车之家的口碑不能正常采集了

八爪鱼简易模板的使用方法非常简单:只需输入相应的车型ID,点击“启动任务”,即可轻松获取到口碑页面的全部字段。
汽车之家的口碑不能正常采集了

汽车之家的口碑不能正常采集了

汽车之家的口碑不能正常采集了




■网友
确实是,用的CSS伪元素伪装了部分形容词名词以及标点符号,我也正在想解决办法

■网友
楼主可以看下这个
反爬虫破解系列-汽车之家利用css样式替换文字破解方法 - 星光海豚 - 博客园
■网友
汽车之家的口碑不能正常采集了

他说的很对, 代码好说, 关键是ip代理, 想不花钱不太可能, 需要买个代理.
第一种方法:
用Python+PyV8, 用v8把js混淆的部分得到, 然后替换字体就可以
Python爬取最新反爬虫汽车之家口碑 - zz153417230的博客 - CSDN博客汽车之家口碑的反爬又变了,怎么破啊?第二种方法:
从移动端爬取内容, 省掉了一步破解js混淆,相对简单.
移动端爬取的代码使用Java写的,也不难,就不贴出来了.

■网友
建议使用瑞雪采集云进行数据采集:

瑞雪采集云第一个支持java和python的企业级的开发平台。

瑞雪采集云的特点:

1. 支持java和python

2. 采集效率高

3. 分布式

4. 任务管理机制强大

5. 部署简单易用

6. 自动学习机制

7,费用低

【汽车之家的口碑不能正常采集了】 http://web2data.com

■网友
别听大家瞎说,之家口碑只要内容及相关发布操作到位,还是可以被抓取的


推荐阅读