怎样自己找数据分析项目来做?( 五 )
方法四:选择下面一个傻瓜式爬虫工具(不需要编程)在网站上爬取你感兴趣领域网站的数据
1)工具: 后羿,同时有mac,windows版本
网址:http://www.houyicaiji.com/
打开官网后点击下图“教程”的地方有入门教程。
点击“关于我们”有官网qq群,遇到问题可以在群里提问。
2)工具:集搜客,只有windows版本
操作指南只需要看下面红框中的内容就可以,遇到问题在它的官网QQ群提问就可以解决。操作指南地址:
https://www.gooseeker.com/tuto/tutorial.html
爬取多少数据?
数据量少一般说明不了什么问题,起码的超过几万条数据。
多尝试、思维逻辑要清晰,一定要知道自己做什么,爬取什么样的数据,提前规划好了,整个过程就不会走太多的弯路。
案例:https://zhuanlan.zhihu.com/p/39733403
【优点】可以获取到自己想要的领域数据
【缺点】需要看官网教程来学习,学习过程中遇到问题咨询官网QQ群可以解决
欢迎留言补充更多行业数据。
上面提到3种获取数据的方法,选择一种适合你自己方法。获取数据后分析,可以使用这个里面的方法来研究:如何分析数据?
■网友
首先需要指出,你一直在强调“如何写一份数据分析报告”;我要告诉你,写报告不是核心。对于你,一个数据分析新人,做数据分析项目的重点是通过“分析业务-定位问题-收集数据-清理数据-建模分析-得出结论-决策优化”的完整过程来丰富自己对数据分析全流程的理解和认知、锻炼自己解决问题的动手能力,而不是为了写报告而写报告。
所以我给你 4 个做数据分析项目建议方向,方便你去探索和实践。
(1)收集外部公开数据并分析
这里面又分为两种,一种是现有的数据,比如国家统计局数据、企业财报、行业数据等等;第二种是网站公开数据但是零散,需要你通过爬虫等采集技术去收集。这些数据是获取行业洞察的重要渠道,也是锻炼你采集和分析外部数据的重要途径。
可以参考:
https://zhuanlan.zhihu.com/p/27535443
https://zhuanlan.zhihu.com/p/29572577
(2)参加大数据竞赛 / 数学建模比赛
这个学校里面应该有很多机会,比如国赛等等。现在有很多网络的大数据竞赛平台,可以组队参赛,如果你编程和算法不错的话,可以一试。
可以参考:
https://tianchi.aliyun.com/
http://www.datafountain.cn/#/
(3)企业内部提取数据并分析
如果你现在在企业里面实现或者工作,又对数据分析有兴趣的话,这就更好了。一方面,看你们企业的数据库权限(读的权限就可以)能否对你开放,你可以学一下SQL就能取到你需要的数据,然后在自己的Excel或者小数据库里面分析。或者看你们企业有使用什么数据分析产品,比如 百度统计/GA/GrowingIO 等等,有权限的话,去里面操作一下,可以了解更多。
可以参考:
https://tongji.baidu.com/web/welcome/login
https://www.google.com/intl/zh-CN/analytics/
https://www.growingio.com/
(4)数据分析书籍案例学习
这是最简单的一种方法了,找那种厚厚的数据分析书籍(最好是附带案例和数据集的),根据书上的指导一步步操作,时间久了自然就熟练了。
推荐阅读
- 聪明人养花,这3种“花”怎样也要养一盆,每年能省不少医药费
- 手机■遇“纠纷”自己报警被识破 男子假卖手机骗60多万
- 互联网怎样解决“家政服务上门速度慢”的问题
- 怎样看待从1月8号起,QQ钱包开始提现收费
- 银行it人怎样转型
- 汽车|冬天怎样让车内温度快速升高?座椅加热的最佳使用方式二,外循环的作用总结
- 怎样进入通信行业
- 怎样评价扶他柠檬茶的小说《云养汉》的结尾
- 有啥方法,网站,项目可以自己练习计算广告学
- 设计专业学生上传自己的作品,用哪个网站比较好
