比价插件是咋记录历史出价的

在爬虫面前,网页是一个数据结构,浏览器是一个编程接口。你替淘宝京东担心资源的问题,多虑了。人民币是可以优化cpu cycle的。
■网友
...我没做过类似的东西 但是之前面过一个海淘的公司 他们问我会怎么做 间接的透露出他们就是用爬虫搞的 还是用Python写的.. 至于爬取时间是按照商品热度来决定的 热度较高的爬取爬取就频繁一些 几乎没人感兴趣的商品则被动爬取 再就是根据服务端提供的缓存过期时间来爬取之类的没你想的那么耗资源就是了..
■网友

■网友
【比价插件是咋记录历史出价的】 可以用某些服务商提供的接口。这样一来减轻服务器压力 而来节省数据积累的时间。慢慢买网站就有提供历史价格 实时价格 以及普通比价的接口,集合线上平台比价 http://api.manmanbuy.com/desc.aspx


    推荐阅读