概述
本节介绍E-Mapreduce的一些基本的概念,优势,我们做了啥,演示了如何创建一个集群。如果大家有啥问题,欢迎直接在留言区域回复。
视频
如果没有播放,请大家点击:
基本的概念
- 集群
- 作业
- 执行计划
E-mapreduce产品的介绍
E-MapReduce是什么?
E-MapReduce 是一项Web服务,简化了大数据处理,提供的大数据框架可以让您轻松、高速、经济、安全、稳定地处理大数据,满足如日志分析、数据仓库、商业智能、机器学习、科学模拟等业务需求。
您可以运行常用的计算框架(例如:Hadoop、Spark)与阿里云其它的数据存储服务(例如 OSS、RDS)中的数据进行互动。
架构图
我们基本包括开源生态常用的组件,一些新的组件也正在添加中,用户也可以通过引导操作自定义安装组件。
易用
3分钟左右创建集群,可以对作业进行管理,作业可以随意编排,提供openapi程序创建集群,执行job等。
低成本
支持两种付费模型,用户可以按需每天执行数个小时,也可以包年包月付费。资源完全跟业务的增长率吻合,最大程度的降低机器空闲的成本。帮用户运维集群,用户几乎不需要运维。
与阿里现有产品深度整合
我们目前提供了几乎所有产品的方案或者lib包,这些都是踩了很多坑总结出来的,大家可以直接看我们的demo
可靠
我们会帮您运维集群。后续会有集群的整体的仪表盘,目前正在开发中。还会增加报警功能,也就是作业运行错误,会发报警信息给您。
安全
- RAM: 主子账号整合阿里云RAM资源权限管理系统
- VPC:构建出一个隔离的网络环境,安全地可以云上,云下互动
- 安全组:可以构建网络防火墙
专业支持
目前我们有专业的专家团队,您出现的如何问题,我都应该遇到。并且我们会总结不通用户的场景,问题 ,给您专业化的建议。
最重要的是,我们还在不断进步
创建一个集群
- 付费模式 包年包月/按量
- 引导操作
- 自定义配置
- 自定义集群的规格
- 扩容
- 释放集群
- openapi
声明
目前已经可以帮用户解决很多问题,由于我们的系统还在不算演化中,后续一些功能会更加强化,我们的原则就是客户第一,满足客户处理大数据的需求。
时间: 2024-12-24 21:00:28