摘要:
开源有四个阶段:拥抱开源、回馈开源、融合开源、回报开源 阿里云E-Mapreduce动态
1.3.3版本 (已经发布)
- 商业化发布,用户无需申请即可使用E-MapReduce服务
1.3.4版本 (正在研发)
- 升级jdk到1.8
- 升级Hadoop到2.7.2
- 添加python2.7.1及python3.4版本
- 添加numpy库
- 支持Presto、phoenix、jstorm、oozie
- 支持Hadoop跟Hbase混合部署
- 支持深圳、上海机房
1.4版本(正在研发):
- 用户执行计划及集群运行状态自定义报警
1.4.1版本
- 集群整体运行情况的仪表盘
- 集群状态监控报警
资讯
- 阿里云资深总监李津表示,开源有四个阶段:拥抱开源、回馈开源、融合开源、回报开源
- 随着大数据技术的不断发展,数据辅助决策这件事会越来越渗透到产品开发和商业流程中;开发、产品、市场、商务等岗位会越来越有“数据感”,能进行自助分析。最终,数据是为商业逻辑服务的
- 近几年,随着市场成本的提高,粗放式的流量模式已经不可持久,所以市场上逐渐提出以产品设计、产品运营为王的理念。但是,无论是以流量为王,还是以产品设计和运营为王,其核心都在转化上
- Kylin、Lens、Ignite、Brooklyn、Apex项目最近一段时间都成为了apache的顶级项目。根据市场的需要,社区正在不断孵化、成长好的大数据项目。
- 讲述了目前spark相关的各个方面
- spark中两个地方比较费内存,一个是storage、一个是execution,1.6版本之前是有一个比例,分割整个堆,1.6版本可以在执行过程中动态调整这个比例。
- 新硬件特别是大内存及在云上跑Hadoop是以后的主要方向。