数据库开发和ETL以后的发展方向是啥
我的观察和猜测数据仓库会与大数据技术结合,比如Apache Kylin。ETL工具也会跑在Hadoop集群上,利用集群能力来应对大数据的ETL需求,各种DataFlow的项目,比如Apache Pig,Cascading,Hortonworks DataFlow等OLAP会利用批量和流式大数据技术,OLTP可能在MPP和NewSQL上发展。
■网友
数仓要平台化,要为scalability做打算,这个scalability不仅是性能上的,通过分布式解决的,还有功能上的,一些架构方面事先做打算。前台业务的分表跟数仓业务的分表可能不大一样,这些都需要专业的人,有一段时间的实际操作经验才可以。
■网友
数据分析和数据仓库都是好方向,你的背景看着还是偏工程,我觉得可以朝数据仓库方向发展。ETL属于数据仓库的一个小方向,偏向于数据的抽取和建模。还可以把数据采集,传输,存储管理,计算这一套的都学习起来,这样你就是正儿八经的大数据平台工程师了。先把Hadoop那套弄一遍。
推荐阅读
- |奥迪开发基于C-V2X校车警示系统
- 汽车|长安汽车:公司与华为、宁德时代三方正在联合开发智能网联电动汽车平台和产品
- 啥是微信开发WEB前端
- 做苹果开发,想买台MacBook,大家建议买啥
- 开发/维护 一个类似qq会员或者Amazon Prime会员的会员系统有哪些难点和挑战
- web开发,一般项目经理从项目中拿多少项目奖金
- 趣头条|海外媒体称大众正在开发两款基于MEB平台的小型车 ID.1与ID.2
- 考研数据库方向
- 哪个数据库,可以直接做数据透视图(navicat类的也可以)
- 咋搞垮一个Onlinejudge
