分析型数据库实时写入功能全面开放

阿里云分析型数据库为客户提供了百亿级海量数据下的毫秒级OLAP查询与分析能力。除了可以通过内建API、阿里云数据集成等途径方便的批量导入大量数据外,分析型数据库目前开放了通过insert/delete sql直接写入或删除数据的功能。

通过insert/delete提交的数据变更,一般可以在30s-60s之间就可以查询到。在最佳实践上,如果想达到最高的写入性能,在网络带宽允许的情况下(参考带宽:一个c1 ECU 2MB/s,一个c8 ECU 8MB/s),可以每个insert中进行批量提交30-100条记录,同时启用10-30个线程进行写入。

2个c8 ECU的写入参考速度一般是5000-7000条/秒(每条20列,50字节计算),若需要更高的写入速率,可以购买更多的ECU进行水平扩展。

实时写入相关详情,可以查看文档 。

在实践中,很多用户的业务系统数据会使用云数据库RDS进行存放,并且同时希望能够低延迟的分析海量的历史数据。为了方便用户实时同步云数据库RDS(MySQL)中的数据变化到分析型数据库中,阿里云数据传输 联合分析型数据库推出了RDS数据订阅并实时同步到分析型数据库的插件,用户可以开通阿里云数据传输后,参考 文档 https://help.aliyun.com/document_detail/ads/user-manual/8/8.5.html 使用dts-ads-writer插件完成这项工作。

另外,三月十日前,分析型数据库正在开展按量付费六五折活动,欢迎各位用户试用。详见:https://www.aliyun.com/product/ads/

时间: 2024-08-29 04:15:29

分析型数据库实时写入功能全面开放的相关文章

一分钟了解阿里云产品:分析型数据库

一.             概述   阿里云产品种类繁多,今天让我们一起来了解下分析型数据库(Analytic DB)吧!   什么是分析型数据库呢?   分析型数据库是阿里巴巴自主研发的海量数据实时高并发在线分析(Realtime OLAP)云计算服务,使得您可以在毫秒级针对千亿级数据进行即时的多维分析透视和业务探索.分析型数据库对海量数据的自由计算和极速响应能力,能让用户在瞬息之间进行灵活的数据探索,快速发现数据价值,并可直接嵌入业务系统为终端客户提供分析服务.     分析型数据库帮您实

数据进入阿里云数加-分析型数据库AnalyticDB(原ADS)的N种方法

从  https://yq.aliyun.com/articles/68208?spm=0.0.0.0.HEVojb&do=login  转载. 数据进入AnalyticDB(原ADS)的N种方法   分析型数据库(AnalyticDB)是阿里巴巴自主研发的海量数据实时高并发在线分析(Realtime OLAP)云计算服务,用户可以在毫秒级针对千亿级数据进行即时的多维分析透视和业务探索. 想使用阿里云分析型数据,对于大多数人首先碰到的问题就是数据如何进入到分析型数据库中.按照分析型数据库数据表的

分析型数据库+数据传输,构建企业级实时数仓

什么是实时数仓 传统的离线数据仓库,将业务数据集中进行存储后,以固定的计算逻辑定时进行ETL 和其它建模后产出报表等应用.离线数据仓库一般采用每日或每几个小时进行一次计算的方式,计算和数据的实时性均较差,业务人员无法根据自己的即时性需要获取几分钟之前的实时数据. 而虽然软件技术和硬件的发展,实时数据仓库一类解决方案越发流行.实时数仓同时具有计算的实时性(计算在用户查询时发生,可自由变换,查询速度快),和数据的实时性(数据产生插入数仓后很短时间内既可以查询到),可以让业务人员在几秒钟甚至几百毫秒的

创建RDS到分析型数据库AnalyticDB数据实时同步

数据传输服务DTS支持RDS到分析型数据库AnalyticDB之间的数据实时同步.通过DTS提供的RDS->AnalyticDB实时同步功能,可以将将企业数据集中分析,实现企业内部各种BI.CRM.实时报表系统等. 本小节介绍如何使用数据传输服务DTS快速创建RDS(MySQL)->AnalyticDB实例之间的实时同步作业,实现RDS增量数据到AnalyticDB的数据实时同步. 支持功能 支持同一个阿里云账号下RDS(MySQL)->AnalyticDB实例的数据实时同步. 支持不同

用好阿里云分析型数据库大存储实例,大幅降低大数据应用成本

在企业的业务中,经常拥有海量的历史结构化数据,虽然不会高频度的使用,但是不排除会不定期的被检索.查询(检索频率一般在100-1000次每天).如物联网.交易历史详单查询.监控/日志数据检索等场景.这时企业需要廉价的存储计算方案,但是又不能将数据存储于离线计算系统或归档到对象存储系统,就需要使用分析型数据库的大存储实例了. SATA.SSD.内存分析混合存储,提供低廉的存储成本(不同规格从0.093元/GB/天到0.051元/GB/天),仅为分析型数据库高性能实例的1/10,而又通过先进的动态二级

数加分析型数据库:让你的数据探索更灵活、准确、快速响应和高并发

在大数据时代,大家越来越注重数据探索的灵活性.准确性.快速响应和高并发.为此,阿里云数加团队在结合多年应用经验的基础上,推出了分析型数据库. 什么是分析型数据库? 分析型数据库(Analytic DB,原名ADS),是阿里巴巴自主研发的海量数据实时高并发在线分析(Realtime OLAP)云计算服务,能让用户可以在毫秒级针对千亿级数据进行即时的多维分析透视和业务探索.分析型数据库对海量数据的自由计算和极速响应能力,能让用户在瞬息之间进行灵活的数据探索,快速发现数据价值,并可直接嵌入业务系统为终

分析型数据库受大数据市场追捧

文章讲的是分析型数据库受大数据市场追捧,近期,大数据领域有一些值得关注的动向.首先,EMC和VMware正式公布成立新公司Pivotal.其次,Actian公司宣布收购大规模并行处理(MPP)分析数据库厂商ParAccel,后者还为Amazon云数据仓库Redshift提供了后端支持. 这两个举动都是以分析为中心,并以大数据作为背景. 成立新公司Pivotal,EMC公司"贡献"出Greenplum部门,该部门也做MPP分析数据库产品.VMware则"贡献"出应用开

向分析型数据库ADS中导入数据

        ADS是阿里云提供的分析性数据库,实现百亿数据毫秒级计算.         在使用ADS进行分析之前,需要先将数据导入到ADS中. 1 两种方法         ADS导入分为两种:批量导入和实时导入.这两种导入方式,是在建表的时候确定的. 1.1 批量导入         建表的时候,需要指定updateType='batch'         批量导入目前仅支持数据源为ODPS表的导入,且要求ADS中的字段名称和ODPS表中的字段名称一致.步骤如下:         (1)在

Teradata天睿公司在2017年Gartner分析型数据管理解决方案关键能力报告中获最高

<企业网D1Net>3月31日(北京)近日,全球领先的数据分析解决方案供应商Teradata天睿公司宣布,在Gartner公司新发布的<分析型数据管理解决方案关键能力报告>(Critical Capabilities for Data Management Solutions for Analytics)四大数据管理使用案例(传统.操作.逻辑和上下文无关)评估中均获最高产品得分.该报告于2017年3月16日发布,由分析师Rick Greenwald.Donald Feinberg和