一分钟了解阿里云产品:采云间应用示例

下面是应用采云间来完成的一个简单业务报表的统计分析,并详细介绍采云间的产品实现。主要涉及几个步骤:

 

首先同步RDS(Relational Database Service,关系型数据库服务)数据库中的数据到ODPS上。

使用数据工厂执行ODPS SQL。通过“数据分析”进行在线可视化数据分析。

 

如何同步RDS数据库中的数据到ODPS上呢?采云间内置了数据同步和流转功能,完成RDS与ODPS之间的双向同步只需在采云间配置中心创建RDS和ODPS的连接信息即可。当配置RDS链接信息时,建议该账号只开通表的查询权限。对于这些用户名和密码,采云间会调用阿里云公有的加密服务进行加密保存。

 

步骤1:进入RDS控制台,点击实例名称,进入RDS管理页面获取实例ID。

 

步骤2:在采云间配置中心,点击“新建连接配置”,填写RDS实例的用户名和密码,保存配置。同理,可以完成ODPS链接信息的配置。

 

完成上述操作之后,通过数据工厂创建需要同步的表的结构,然后在任务管理里通过新建“同步任务”的方式,配置数据同步任务,确定提交之后,就可以每天自动进行数据同步了。

 

重复上述的操作,可以配置多个同步任务,完成每天从生产库里将表中的数据同步到离线分析环境ODPS中,为后续的数据清洗转换作准备。

 

在采云间控制台上第一次登录数据工厂时,需要输入ODPS的Project名称和对应的Access Key ID和Access Key Secret。点击登录界面的“立即查看Access Key”,找到启用的Access Key ID和Access Key Secret,复制并粘贴。

 

进入数据工厂,点击“新建SQL文件”,输入SQL语句,点击“执行”按钮,即可完成一个简单的查询。

 

通常我们会依据业务统计需求,对生产库里同步过来的多个表,进行数据关联处理,生成结果表。

 

 

如何通过“数据分析”进行在线可视化数据分析?

 

首先,需要从ODPS上导入元数据信息,形成数据分析的数据集。

 

其次,从导入的数据集中,选择一个打开,就可以开始进行数据分析了。整个分析过程的体验非常像在Excle里做透视分析,可以大大降低学习成本。

 

通过上述介绍,相信大家已经从产品角度对采云间有了一定认知。

 

 

如果想了解更多关于采云间,请访问:

 

时间: 2025-01-05 06:43:35

一分钟了解阿里云产品:采云间应用示例的相关文章

消息称腾讯内测云产品微云 实现PC手机信息流互通

1月12日消息,据网友爆料,腾讯正在内测一款云http://www.aliyun.com/zixun/aggregation/14307.html">服务产品"微云". 据微博网友"互联网的那点事"爆料,腾讯正在内测云产品"微云",使用微云可让用户的信息在PC和手机之间自由流动.微云的主要功能包括:第一,PC和手机文件可进行无线传输.第二,文件自动同步到另一台PC上.第三,手机中的照片自动传送到PC. 据悉,微云包括PC端.手机端

一分钟了解阿里云产品:云监控

一.             概述   阿里云发布的产品种类齐全,今天让我们一起来了解下云监控这款产品吧.   什么是云监控呢?   云监控(CloudMonitor) 是一项针对阿里云资源和互联网应用进行监控的服务.云监控服务可用于收集获取阿里云资源的监控指标,探测互联网服务可用性,以及针对指标设置警报.     那么,云监控有什么优势呢?   云监控服务无需特意购买和开通,您注册好阿里云账号后,便自动为您开通了云监控服务,方便您在购买和使用阿里云产品后直接到云监控查看产品运行状态并设置报警规

一分钟了解阿里云产品:云虚拟主机

一.             概述   阿里云产品众多,今天让我们一起来了解下云虚拟主机吧.   什么是阿里云云虚拟主机呢?   简单来说,阿里云虚拟主机市场占用率第一.产品特点:预装网站运行环境,赠送正版数据库,可通过图形化控制面板管理,主要用于搭建网站.提供基于云端的DDoS入侵.防御及网站安全防御服务.全国仅有8线BGP骨干网络,全网覆盖(涵盖电信.联通和移动等主流运营商).   那么,云虚拟主机有什么独特的优势呢?我来给大家说说.   阿里云虚拟主机有两个版本供大家选择:极速共享版虚机和

一分钟了解阿里云产品:云引擎ACE概述

阿里云发布了诸多产品,今天让我们一起来了解下云引擎ACE(AliCloud Engine)吧! 什么是云引擎ACE呢?下面我来简单介绍下吧.   云引擎是阿里云推出的应用托管平台,支持托管Java.PHP.Node.js.Python等语言开发的Web应用和API服务,大大简化用户在ECS上的应用运维工作. 您只需上传开发完成的应用代码,ACE会自动完成资源分配.运行环境初始化.程序启动.负载均衡配置.运行状况监控.日志采集.自动伸缩等一系列连贯的部署工作.   与传统应用运维相比, ACE都有

一分钟了解阿里云产品:云数据库Redis版

一.             概述   阿里云发布了很多款产品,几天让我们来一起了解下云数据库Redis版(AliCloudDB for Redis)吧.     什么是云数据库Redis呢?   运输库Redis是兼容开源Redis协议的Key-Value类型在线存储服务.云数据库Redis版支持字符串.链表.集合.有序集合.哈希表等多种数据类型,及事务(Transactions).消息订阅与发布(Pub/Sub)等高级功能.通过内存+硬盘的存储方式,云数据库Redis版在提供高速数据读写能力

一分钟了解阿里云产品:云数据库MongoDB版

一.             概述   阿里云产品种类齐全,今天让我们一起来了解下云数据库MongoDB版(AliCloudDB for MongoDB)吧.   什么是云数据库MongoDB版呢?我来给大家说说吧.   云数据库MongoDB版基于飞天分布式系统和高性能存储,提供三节点副本集的高可用架构,容灾切换,故障迁移完全透明化.并提供专业的数据库在线扩容.备份回滚.性能优化等解决方案.   与自建数据库相比, 云数据库MongoDB版有什么优势呢?我们为您提供更优质的服务:   云数据库

一分钟了解阿里云产品:云引擎ACE五大热点技术问题分析

在上一篇文章中,我们为大家介绍云引擎ACE的概况,云引擎ACE(AliCloud Engine)是阿里云推出的应用托管平台,支持托管Java.PHP.Node.js.Python等语言开发的Web应用和API服务,大大简化用户在ECS上的应用运维工作.那在使用过程中,经常遇到的热门技术问题有哪些呢?   基础架构: https://help.aliyun.com/document_detail/ace/brief-manual/ace-summary/architecture.html?spm=

一分钟了解阿里云产品:云数据库Memcache版

一.             概述   阿里云产品种类繁多,今天让我们一起来了解下云数据库Memcache版(AliCloudDB for Memcache,原OCS)吧.   什么是云数据库Memcache版呢?   一句话,云数据库Memcache版是基于内存的缓存服务,支持海量小数据的高速访问.     那么,云数据库Memcache有什么优势呢?我来给大家说说吧.   云数据库Memcache可以极大缓解对后端存储的压力,提高网站或应用的响应速度.云数据库Memcache支持Key-Va

一分钟了解阿里云产品:云道CDP产品使用问题

数据集成也发布有一段时间了,下面简单总结下CDP相关的问题和解决办法.     CDP目前支持的数据源有哪些?   现阶段(公测前期)支持RDS(Mysql)与ODPS离线互导数据,未来将会逐步开放离线和流式的数据通道.     CDP如何完成数据同步?   CDP Job实现批量数据抽取和装载,Job利用两端数据存储系统在线访问接口进行数据抽取或者装载.例如,CDP Job读取Mysql数据源过程中,利用Mysql SELECT语句完成数据从Mysql服务器抽取,并转化为CDP内置数据类型转交

“一分钟了解阿里云”文章汇总(2)

目前阿里云已有60多款产品,包括弹性计算.数据库.存储与CDN.网络.大规模计算.云盾.中间件等方面.为了让大家更好的了解阿里云产品,我们优选整理了部分产品,对其基础情况.热门技术问题和相关使用体验做了整理.我们希望整理的这些内容,能够帮助到大家.   一分钟了解阿里云产品之批量计算:概述.热点技术问题分析.体验(浅谈阿里云批量计算) 一分钟了解阿里云产品之EDAS:概述.热点技术问题分析.实践(EDAS正式商用 "互联网+中石化"只需90天) 一分钟了解阿里云产品之企业邮箱:概述.热