请问怎样选择一个实践大数据的场景
近6年的半个大数据老鸟路过。数据虫巢 可以看看这个,里头的整个数据流程:从互联网上爬取数据,进行数据存储,再到数据分析挖掘,最终数据可视化。自己多折腾,也可以尝试做一个相关数据处理流程出来,没有想象中的难。里头涉及的技术,我可以稍微的拆解一下:(1)数据源:爬虫使用了javacrawler;(2)存储:存储直接阿里云+mysql;(3)分析挖掘:使用文本挖掘相关技术,包括情感分析、特征提取等,此外就是类sql的统计分析了;(4)数据可视化:主要是百度系的Echarts;(5)网站:后端+前端使用的spring boot jsp,域名是万网的。所以,多折腾一下,自己玩,还是以互联网公开数据为主,多想一些切入点,可以是一些有趣的数据分析场景切入。贴两个有趣的大数据切入场景参考:(1)雾霾分析

(2)大数据职位分析
你也可以模仿这种思路,锻炼自己的能力~~
■网友
谢邀!现在获取数据的办法很多了。你说的这种也是其中之一,也是最常用的。抓,互联网很多数据都能够抓取的,比如说影评数据、交通数据、社交网络数据、舆情数据……都可以抓。第二种,买,有钱就是任性,现在各种大数据交易所和大数据交易平台层出不穷,想买数据只要有钱,很容易就能够买到你想要的数据,当然基本上都是脱敏了的。第三种,换,你喜欢才苹果,我喜欢吃荔枝,那咋们交换吧,这个前提是你也有数据,现在数据交换也是获取数据的重要方式。第四种,产,到这个阶段其实已经远远脱离了你说的0了,牛逼的公司本身就产生数据,像、今日头条等等这些网站,用户基数大以后,也会产生大量的数据。先写这些,想到在补充,欢迎更多同行来交流。
■网友
【请问怎样选择一个实践大数据的场景】 可以通过网络爬虫去爬取数据
推荐阅读
- 聪明人养花,这3种“花”怎样也要养一盆,每年能省不少医药费
- 新冠病毒■防御新冠病毒,选择哪类消毒剂?江苏疾控专家权威解答
- 互联网怎样解决“家政服务上门速度慢”的问题
- 怎样看待从1月8号起,QQ钱包开始提现收费
- 银行it人怎样转型
- 银行高管的薪酬结构图表最新的,请问在哪里可以收集
- 汽车|冬天怎样让车内温度快速升高?座椅加热的最佳使用方式二,外循环的作用总结
- 怎样进入通信行业
- 怎样评价扶他柠檬茶的小说《云养汉》的结尾
- 在上海陆家嘴附近工作,请问去哪边租房会比较好
