使用MaxCompute快速实现企业数据化运营

随着人类社会从IT时代进入到DT时代,现在越来越多的企业开始重视数据的价值,但是并不是所有的企业都能够去挖掘出数据的价值。因此,企业需要通过使用大数据相关的技术对数据进行分析,并通过数据可视化技术将分析结果展现出来,这样才能够让企业负责人快速了解企业自身发展的情况。

以我们的一个客户为例,来看一下如何快速地实现企业数据化运营。我们有一个客户,他们的网站系统部署在阿里云上,其系统架构如下所示:

随着业务的发展,公司管理层希望了解网站访问的情况,并进行针对性的推广活动。但是,公司的技术人员并不知道如何把数据的结果很直观地展示给管理、运营和市场推广等人员。因此,其决定通过大数据的可视化技术将企业的业务数据化地展示出来。随后,该公司的技术人员对现有可视化技术深入地了解后,得出了以下的结论:

  • 自建系统:搭建周期长,需要雇佣专业的技术人员,同时部署、运维和研发的成本高;
  • 购买成熟的产品:成本比较高且部署比较耗时, 需要专门的技术人员对系统进行维护
  • 第三方数据分析服务:搭建周期短,成本低且不需要对系统本身进行运维
    由于企业的网站部署在阿里云上,并且数据是存储在阿里云的数据库服务RDS中,在尝试了自建Hadoop集群和MongoDB数据库之后,最后决定使用阿里云的MaxCompute对数据进行分析,并使用QuickBI来实现数据可视化展示。

该企业网站现有的数据存储在RDS的数据库中,通过阿里云数据管理服务DMS查看到的数据如下所示:

为了对业务数据进行分析,需要将数据从RDS导入MaxCompute中,通过大数据开发套件DataIDE可以很容易的实现MaxCompute的数据同步和任务开发。在阿里云官网上进入DataIDE的管理控制台,使用DataIDE对MaxCompute进行管理。在数据集成的模块中,把企业使用的RDS数据库作为数据源添加进来。

然后在数据开发的模块中,通过脚本在MaxCompute中创建和RDS相同的数据表,并通过拖拽的方式实现数据分析的任务开发。

开发完成后,提交并运行任务,从而实现使用MaxCompute对业务数据分析的目的。为了把分析的结果通过图表的形式展现出来,登录到QuickBI的管理控制台,通过“导入数据源”将MaxCompute使用的项目空间创建为新的数据源。

为了展示网站的访问情况和用户信息,分别根据customers、user_measures和refer_info三个表创建数据集:

然后在“仪表板”页面中,分别对三个数据集中的数据进行展示,目前“仪表板”提供了多种图表格式供用户选择使用:

首先,使用饼图展示数据集customers中用户性别比例的分布(0表示性别没有输入,1表示男性,2表示女性):

接着,再分别使用柱状图和饼图展示访问网页的PV/UV和页面访问来源的情况。最终实现的报表如下所示:

为了报表展示的美观性,还可以通过拖拽的方式对图表位置进行排版:

最后对设计的仪表板进行保存,并将仪表板的链接发给管理层、市场推广等相关人员去查看分析的结果。这样,公司管理层可以很容易地根据数据分析报表做出正确的决策,从而实现数据化的运营。

时间: 2024-10-08 13:51:20

使用MaxCompute快速实现企业数据化运营的相关文章

初创公司如何快速低耗实现数据化运营

摘要:本文的整理自2017云栖大会-成都峰会上青桔科技CEO甘小勇的分享讲义,讲义主要介绍了公司数据化运营的相关内容,先阐明初创公司业务数据化的必要性,然后通过介绍数据化的实践来分析数据化做了什么,最后总结了货车司机公司如何利用阿里云QDI做到数据化运营并提出数据化实践的未来展望. 在2017云栖大会-成都峰会上,青桔科技CEO甘小勇做了题为<初创公司如何快速低耗实现数据化运营>的分享.在大数据的时代背景下,初创公司也需要充分利用数据,将业务数据化.使公司能精准定位用户,提供更弹性的服务.充分

初创企业如何快速实现数据化运营

云栖大会-成都峰上,大数据分论坛中货车兄弟CEO甘小勇为我们带来了<初创公司如何快速低耗实现数据化运营>精彩的演讲,以下为甘小勇的演讲实录. 为什么需要业务数据化? 大家好,我是货车兄弟CEO甘小勇,首先要讲的是初创公司为什么需要业务数据化? 大数据不是成本,而是资源. 我们货车兄弟产品的定位:货车维修互联网服务平台.在IT时代的视角下,只需要展现一个维修服务商的简单信息,但在DT时代,需要更精准的数据提供服务,故障详情.车辆状况.维修费用.服务评价等,都是非常有价值的数据资产.数据对于初创公

数据挖掘与数据化运营实战

大数据技术丛书 数据挖掘与数据化运营实战:思路.方法.技巧与应用 卢辉 著 图书在版编目(CIP)数据 数据挖掘与数据化运营实战:思路.方法.技巧与应用 / 卢辉著.-北京:机械工业出版社,2013.6 (大数据技术丛书) ISBN 978-7-111-42650-9 I. 数- II. 卢- III. 数据采集 IV. TP274 中国版本图书馆CIP数据核字(2013)第111479号 版权所有·侵权必究 封底无防伪标均为盗版 本书法律顾问 北京市展达律师事务所     本书是目前有关数据挖

数据实践之美:32位大数据专家的方法、技术与思想. NO.1 数据化运营的方法论体系

NO.1 数据化运营的方法论体系 张子良 网名胖子哥,混迹IT十余载,好读书,不求甚解.经史子集,诸子百家,一样不通.唯喜老庄之道,凡事随心,顺天应时,无所苛求.术业有专攻,金融和互联网领域数据方向,数据架构.数据仓库.BI分析多有涉猎,所憾无一精通,唯有孜孜以求,继续践行. 从大数据,到互联网思维,有人迷失,有人觉醒,迷失者继续凌乱,而清醒者却开始探索其背后的本质.当喧嚣散去,山还是山,商业还是商业,本质未变,变的只是渠道和方法.互联网与大数据时代,如何回归商业的本质,数据化运营也许不是唯一的

数据挖掘与数据化运营实战. 1.4 数据化运营的必要条件

1.4 数据化运营的必要条件 虽然从上面的分析可以看出,数据化运营有如此多的优越性,但并不是每个企业都可以采取这种新战略和新管理制度,也不是每个企业都可以从中受益.个中原因在于成功的数据化运营必须依赖几个重要的前提条件. 1.4.1 企业级海量数据存储的实现 21世纪核心的竞争就是数据的竞争,2012年3月29日,美国奥巴马政府正式宣布了"大数据的研究和发展计划"(Big Data Research and Development Initiative),该计划旨在通过提高我们从大型复

数据挖掘与数据化运营实战. 1.2 数据化运营的主要内容

1.2 数据化运营的主要内容 虽然目前企业界和学术界对于"数据化运营"的定义没有达成共识,但这并不妨碍"数据化运营"思想和实践在当今企业界尤其是互联网行业如火如荼地展开.阿里巴巴集团早在2010年就已经在全集团范围内正式提出了"数据化运营"的战略方针并逐步实施数据化运营,腾讯公司也在"2012年腾讯智慧上海主题日"高调宣布"大数据化运营的黄金时期已经到来,如何整合这些数据成为未来的关键任务". 综合业界尤其

餐饮外卖业为例-数据化运营操作指南(附29页PDF下载)

◆ ◆ ◆ 前言 作为一个一直在数据领域里折腾的码农跨界乱入了餐饮行业,从可视化开发到真枪实弹的用可视化去做业务分析,辅助运营甚至作为公司运营决策的依据,这段经历让我更真切的体会到数据的价值.我希望用这个系列文章记录下过去一年时间自己做过的一些事情,虽然内容源于如何在餐饮外卖行业中利用数据驱动实施数据化运营,但相信跟很多行业都有共通之处,从交易订单的分析下沉至订单所包含的商品或服务销售分析乃至用户交易(活跃)行为所反应出来的留存流失情况,很多模型和方法应该都是通用的. 沉淀即成长,这个系列的成文

从零开始,构建数据化运营体系

数据化运营是一个近年来兴起的概念,它在运营的基础上,提出了以数据驱动决策的口号. 在了解数据化运营前,运营们有没有过如下的问题: 不同渠道,效果究竟是好是坏? 活跃数下降了,到底是因为什么原因? 这次活动推广成效如何? 发布了版本,用户喜不喜欢? 我们总是说传播,传播到底有多大? 这是产品和运营每天每时每刻都会遇到的问题.数据化运营,实际以解决这些问题为根本.它从来不是BAT的专属,也不是大数据的独宠,每一家互联网公司,都有适合的数据运营土壤. 数据运营体系,是数据分析的集合与应用,也是数据先行

数据挖掘与数据化运营实战. 1.3 为什么要数据化运营

1.3 为什么要数据化运营 数据化运营首先是现代企业竞争白热化.商业环境变成以消费者为主的"买方市场"等一系列竞争因素所呼唤的管理革命和技术革命.中国有句古语"穷则思变",当传统的营销手段.运营方法已经被同行普遍采用,当常规的营销技术.运营方法已经很难明显提升企业的运营效率时,竞争必然呼唤革命性的改变去设法提升企业的运营效率,从而提升企业的市场竞争力.时势造英雄,生逢其时的"数据化运营"恰如及时雨,登上了大数据时代企业运营的大舞台,在互联网运营的