开源大数据周刊-第12期

阿里云E-Mapreduce动态

E-Mapreduce团队

1.3.4版本 (已经发布)

  • 升级jdk到1.8
  • 升级Hadoop到2.7.2
  • 添加python2.7.1及python3.4版本
  • 添加numpy库
  • 支持Presto、phoenix、jstorm、oozie
  • 支持Hadoop跟Hbase混合部署
  • 支持深圳、上海机房

1.4版本(正在研发):

  • 用户执行计划及集群运行状态自定义报警

1.4.1版本

  • 集群整体运行情况的仪表盘
  • 集群状态监控报警

资讯

  • 5W1H(六何分析法)全景洞察大数据
    我们从大数据的特征说起,谈到了大数据的价值,再聊什么时候做,谁去做,选择什么平台,最后聊到了怎么做的问题。通过对一些真实的场景分析,了解了大数据的全貌。
  • 阿里云发布《数据安全白皮书》
    6月29日,阿里云在云栖大会·成都峰会发布《数据安全白皮书》,首次公开了阿里云在保障230万用户数据安全方面建立的流程、机制以及具体实践办法。借此机会,针对用户最关心的云上数据传输、使用和存储等问题,阿里云也给出了详实的解读和承诺。并通过权威的认证和审计报告,充分证明其在数据安全方面的合法合规性。
  • 使用深度学习打造智能聊天机器人
    很多大型互联网公司投入重金研发相关技术,并陆续推出了相关产品,比如苹果Siri、微软Cortana与小冰、Google Now、百度“度秘”……聊天机器人是未来服务的入口,尤其在移动场景,本文重点介绍如何通过深度学习技术,构建开放领域、生成式聊天机器人。
  • 数据分析师的职业规划之路
    数据分析师作为一个出现时间不长的工种,大数据时代下,成为螺丝钉还是成为龙头,需要尝试新的可能。
  • 使用Hive进行OSS数据处理的一个最佳实践
    本文主要介绍如何使用Hive来处理保存在OSS上的数据源,并通过E-MapReduce计算,最终的结果保存在OSS上。
  • E-MapReduce的HBase集群使用Hue
    E-MapReduce的HBase集群中使用Hue,方便用户访问查询数据.
  • Spark搭档Elasticsearch
    Spark与elasticsearch结合使用是一种常用的场景,在这里整理了一些Spark与ES结合使用的方法。

国内大数据相关会议

会议 地点 时间 费用
2016上海china Hadoop Summit 上海 2016年07月29日-2016年07月30日 收费
Strata + Hadoop World 北京 2016年8月04- 2016年8月06日 收费
2016北京云栖大会 北京 2016年08月07日 免费

版权声明

信息都是来自互联网,都给出了原文的链接,如果侵权,请联系我们,我们负责删除。
阿里云E-Mapreduce团队 出品

历史周刊链接

开源大数据周刊-第11期
开源大数据周刊-第10期
开源大数据周刊-第9期
开源大数据周刊-第8期
开源大数据周刊-第7期
开源大数据周刊-第6期
开源大数据周刊-第5期
开源大数据周刊-第4期
开源大数据周刊-第3期
开源大数据周刊-第2期
开源大数据周刊-第1期

时间: 2024-08-06 03:25:01

开源大数据周刊-第12期的相关文章

开源大数据周刊-第15期

阿里云E-Mapreduce动态 E-Mapreduce团队 1.4版本(已经发布) 作业运行失败报警 作业并行提交 添加sqoop.shell类型的作业 1.4.1版本(正在研发) 完善失败报警 完善定时任务,增加小时.分钟定时任务 1.5.0版本 (正在研发) 集群整体运行情况的仪表盘 集群状态监控报警 1.5.0版本 交互式查询(支持hive.spark) 资讯 中国大数据发展10大趋势5大挑战 中国大数据发展10大趋势5大挑战,如:大数据的首席数据官开始崛起.可视化推动大数据平民化.智能

开源大数据周刊-第13期

阿里云E-Mapreduce动态 E-Mapreduce团队 1.3.4版本 (已经发布) 升级jdk到1.8 升级Hadoop到2.7.2 添加python2.7.1及python3.4版本 添加numpy库 支持Presto.phoenix.jstorm.oozie 支持Hadoop跟Hbase混合部署 支持深圳.上海机房 1.4版本(正在研发): 用户执行计划及集群运行状态自定义报警 1.4.1版本 集群整体运行情况的仪表盘 集群状态监控报警 资讯 从Hadoop Summit 2016看

开源大数据周刊-第17期

阿里云E-Mapreduce动态 E-Mapreduce团队 1.4版本(已经发布) 作业运行失败报警 作业并行提交 添加sqoop.shell类型的作业 1.4.1版本(已经发布) 完善失败报警 完善定时任务,增加小时.分钟定时任务 1.5.0版本 (正在研发) 集群整体运行情况的仪表盘 集群状态监控报警 1.6.0版本 交互式查询(支持hive.spark) 资讯 大数据投资人必读:中国大数据发展与投资分析报告 随着大数据蕴涵价值的逐步释放,使其成为IT信息产业中最具潜力的蓝海.大数据正以一

开源大数据周刊-第16期

阿里云E-Mapreduce动态 E-Mapreduce团队 1.4版本(已经发布) 作业运行失败报警 作业并行提交 添加sqoop.shell类型的作业 1.4.1版本(正在研发) 完善失败报警 完善定时任务,增加小时.分钟定时任务 1.5.0版本 (正在研发) 集群整体运行情况的仪表盘 集群状态监控报警 1.6.0版本 交互式查询(支持hive.spark) 资讯 Apache Spark 2.0.0 发布,APIs 更新 该版本主要更新APIs,支持SQL 2003,支持R UDF ,增强

开源大数据周刊-第14期

阿里云E-Mapreduce动态 E-Mapreduce团队 1.4版本(正在发布): 作业运行失败报警 作业并行提交 添加sqoop.shell类型的作业 1.4.1版本 集群整体运行情况的仪表盘 集群状态监控报警 资讯 创业公司如何构建数据指标体系? 对于庞大的创业群体和数据运营新手来说,这将是一篇非常具有参考价值的干货贴,作者将在文章中深入阐述两套构建指标体系的方法,即关键指标法和海盗指标法. 怎样选择数据平台的建设方案 文中对比了MPP.Hadoop传统的数据库等不同方案的优缺点,值得一

开源大数据周刊-第30期

阿里云E-MapReduce实践 泰为在E-MapReduce上的考量与实践 阿里云EMR是基于 Hadoop 的生态环境来搭建,同时可以跟阿里云的对象存储服务OSS等云服务进行无缝数据交换,方便用户将数据在存储平台和计算平台之间进行输入输出,以满足不同业务类型的需要,所以对阿里云EMR充满期待. HIVE MapJoin在E-MapReduce上的调优与处理总结 HIVE被很广泛的使用,使用过程中也会遇到各种千奇百怪的问题.这里就遇到的MapJoin Local 内存不足的问题进行讨论,从问题

开源大数据周刊-第31期

阿里云E-MapReduce实践 专注年轻一代,基于E-MapReduce梨视频推荐系统 在2016杭州云栖大会的"开源大数据技术专场"上,梨视频大数据负责人杨智带来了<基于E-MapReduce梨视频推荐系统>的精彩分享.分享中,他重点介绍了梨视频中基于阿里云的数据处理系统和梨视频推荐系统,精彩不容错过. 资讯 上海社科院惠志斌:数据生态治理要啃硬骨头 数据生态治理面临一场艰巨的战役,长期来看,这场战役的成败将决定移动互联网时代下公民的权利.企业的利益和社会的信任,更关系

开源大数据周刊-第39期

阿里云E-Mapreduce动态 E-MapReduce 3.0.0镜像版本(已发布) 支持Spark 2.0+版本 支持提供统一的Hive外部Meta数据 HBase 支持PB级别的分布式数据库年后开始公测 E-MapReduce 全体成员祝大家 新年快乐! 资讯 Hadoop黑客赎金事件解读及防范 年关将至,Mongodb数据丢失的事情还在眼前,数以千计的Mongodb数据库已经被删除或者被黑客勒索,就在最近一段时间,黑客也在攻击Hadoop,有不少Hadoop集群的数据全部丢失,这些数据甚

开源大数据周刊-第28期

阿里云E-Mapreduce动态 E-Mapreduce产品即将发布的版本信息如下: 1.5.2版本 增加预定制配置,如试用型/入门配置/高计算配置/高存储配置等 1.6.0版本 交互式查询(支持Hive.Spark) 资讯 干货报告丨医疗大数据的行业应用研究 报告从医疗大数据的概念.政策财政支持.发展背景以及现状,到相关具体的应用场景进行了详细介绍,该领域具有广阔的前景. 大数据的价值:找到别人的"集体智慧" 作者为数据咨询师车品觉,文章主要内容:①大数据行业正在发生三大颠覆性变化: