Teradata技术总监:大数据已成为主流

本文讲的是Teradata技术总监:大数据已成为主流,“大数据”刚出现的时候,基本上只会用在高端科技类或者硅谷网络分析公司中;到了今天,如银行、电信、保险公司等更为传统的行业也逐渐搭上了这辆“列车”。然而,在Teradata(数据仓库公司)技术总监Stephen Brobst(宝立明)看来,这还仅仅是个开始。

  2012年,许多IT业内人士都发起了关于大数据的讨论,宝立明就是其中之一。在今年TechTarget对他的采访中,他两次提到了他眼中的大数据热潮。在以下的精选采访中,你会读到宝立明对云端数据仓库的憧憬、对内存技术流行的看法以及对移动消费智能的期待。

  问:对于大数据现象,你有什么看法?

  宝立明:大数据热潮主要关注的是大数据的容量,这却恰恰是大数据中最不重要的一方面。拿Geoffrey Moore的“crossing the chasm”采用曲线图(见下图)来说,我们现在就处在裂口(chasm)的左边,即发明者与早期采用者阶段,所有的企业都是高端科技与网络公司。不过,今年有了一点改变,更多的主流公司开始采用大数据分析;这些企业都不是技术公司,或者说得准确一点,与网络无关,比如银行、电信等等。

  问:但是像Hadoop和MapReduce这样的大数据技术,它们不仍然是硅谷网络公司一些核心软件工程师的专长领域吗?

  宝立明:在这个的过程中,Hadoop非常重要。但是,大数据不等于Hadoop;Hadoop目前只适合高端科技和非常专业的公司。其实,Moore的理论对技术专业人士和实用主义者(只为应用技术而对技术本身不感兴趣的人)同样适用。对于Teradata来讲,我们的Aster Data在大数据普及过程中起到了桥梁的作用。去年,使用Aster Data的大客户都是网络公司,像LinkedIn、BarnesandNoble.com等。今年的业务明显偏向主流企业——电信和银行;它们大部分都在美国,这点没错,但相信用不了多久就能够推广到其他地区。

  问:现在很多人都在讨论开源与传统商用关系数据库的利弊。你是怎么看这两者的关系的?

  宝立明:我们现在和Hortonworks的合作关系就是一个典型的例子。他们有很多Hadoop原创开发者,运用的都是开源技术;有趣的是,开发出来的元数据架构不仅可对原始数据进行处理,还能够使数据获取变得更加高效。

  问:你对内存分析的看法是什么?

  宝立明:太火了。可以这么说,内存价格每过18个月就会下降30%,但即便如此,存储所有数据还是花费不菲。当然还有一点,数据容量每18个月就会增长40%,所以内存依旧无法满足数据量需求。SAP正在大肆宣扬HANA可以解决所有问题,这完全是因为受到了甲骨文的影响。知道困兽之斗吧,是Oracle的产业链引发了SAP的不理智行为。SAP每年花在甲骨文身上的钱实在太多了,他们想要剥离Oracle数据库,因此而收购了Sybase,甚至在收购之前Sybase还没有通过SAP应用的认证,他们要将Sybase作为SAP唯一的数据库平台。但要知道Sybase的规模还不足以支撑,对于理性的用户来说肯定不会想简单地听从厂商的摆布。相比较而言,IBM的DB2要更好一些。

  问:但是企业数据仓库现在是不是有点过时了?Teradata的一些竞争对手肯定会这么认为。

  宝立明:这是一个仁者见仁的问题。现在已经不可能把所有数据放到同一个地方了。想想看,如果你把所有的电子邮件和.wav文件全都放到一个数据仓库里行不行?很可能不行。但是,企业内容管理与数据仓库还有区别。对于关系数据来说,集成化数据仓库与一系列小型数据集市比起来更省钱,业务价值也更高。Sybase的模型就是小型数据集市;你最后只能不停地拷贝数据,通过各种方法将它们聚集起来,成本也自然上涨。

  问:你认为云计算对数据仓库有什么影响吗?

  宝立明:公有云架构对数据仓库没有影响,因为企业的CIO不会无缘无故地把财务数据或客户数据放到云上。那样做很危险。但私有云架构确实有影响。第一,通过私有云,你可以巩固数据集市,减少利用率不足的问题。经过几次以后,架构成本也就省下来了。第二,你可以通过灵敏的方式将数据集成,实现业务价值。在集中化解决方案中,业务方面的变化总是来得很慢。不过,你可以在私有云中利用data lab的概念,对另一数据源(内外部皆可)进行集成。这个方法的关键在于,data lab与数据仓库为同一环境,所以你不需要复制集中化数据,也没有安全问题,同时授权给了用户一种非真实的网格计算方法,与云的概念类似。

  问:在企业IT中,云计算与移动化常被同时提到,认为会改变游戏规则。你是怎么看移动技术对数据仓库与BI的影响?

  宝立明:我们的主要概念是“消费者智能”(“consumer intelligence”)。我们的团队主要关注于公司员工的决策制定。消费者智能就是为那些是我们客户的消费群体提供智能服务。这样一来,移动设备必不可少。我们在英国的案例是莱斯银行,美国的是富国银行,提倡你就是自己家庭的CEO。还有一个案例是在公共事业领域。南加州爱迪生公司(美国第二大电力公司)实施了智能电表(smart metering)以后,在他们的网站Sce.com上,消费者可以分析自己能源消费的类型。移动消费者智能可谓大势所趋。

作者: 茶一峰 

来源: IT168

原文标题:Teradata技术总监:大数据已成为主流

时间: 2024-09-14 18:33:53

Teradata技术总监:大数据已成为主流的相关文章

ofo最新智能锁技术和大数据平台亮相2017软博会

本文讲的是ofo最新智能锁技术和大数据平台亮相2017软博会[IT168 资讯]6月29日,由工业和信息化部.北京市人民政府共同主办的"第二十一届中国国际软件博览会"在北京展览馆盛大开幕.科技和时尚的ofo展台成为今年软博会一大看点. 以"软件定义世界,智能引领未来"为主题,今年软博会展出了大数据.人工智能.虚拟现实等新兴热点技术,以及安全可靠.制造业与互联网融合.软件创业创新等方面进展,同时,还展示了工信部.软件名城和重点地方省市一年来的取得的成果和政策举措. o

移动技术、大数据、云计算之于物联网 成功OR毁灭

随着物联网不断发展,今天我们再来讲讲移动技术.大数据与云计算对物联网的影响.  移动技术 说到移动技术,我想大家跟我一样对移动设备与移动应用在21世纪的创造记忆犹新. 据估计2015年底移动设备数量将超过全球人口总数. "物联网对移动领域是仙丹还是毒药?" 移动技术是物联网未来的重要一环,它改变了我们生活的方方面面. 对已经使用了物联网的机构所做的分析显示用户更偏好于享受现成的移动应用.事实上开发者应着力于为用户提供更强有力的控制,以便用户可以随意操控家里.车里以及办公室里的一切设备.

大数据已成为重要战略性资源

大数据已成为重要经济资源 信息技术广泛应用于经济社会发展领域,产生了十分庞大的各类数据,人们形象地称为大数据.狭义的大数据是指以数量巨大.来源分散.格式多样.应用价值高为主要特征的数据集合.而广义的大数据除了数据集合的含义外,还包括对这类数据进行采集.存储和关联分析,以及从中发现新知识.创造新价值.提升新动能的新技术和新业态.因而,大数据所代表的不仅仅是重要的技术变革,而且是战略性经济资源,大数据服务业已成为前景广阔的新技术产业. 大数据的价值在于可提供尽可能多的详尽信息并对信息进行有效处理.通

基于数据消冗技术的大数据加密算法研究

基于数据消冗技术的大数据加密算法研究 华北水利水电大学   王蒙蒙 论文的主要研究内容和创新点包括:1.大数据通用加密模型及加密技术原理研究.在对大数据基本特征及通用加密模型进行系统研究的基础上,深入剖析了基于现代密码体制.基于生物工程.基于属性基和基于并行计算四类大数据加密方案的技术原理和优缺点. 2.提出了一种基于Bloom filter技术的大数据消冗算法.根据大数据信息海量.数据量增长快.数据类型多样化.密度低和冗余度高等基本特征,深入研究了完全文件.固定长度块.变长分块和滑动窗口4种消

使用超大规模数据分析技术支持大数据预测

我给大家带来的演讲内容是关于"使用超大规模数据分析技术支持大数据预测"这方面的.首先介绍一下我自己,我叫韩卿,很多人叫我Luke.我是Kyligence公司的联合创始人兼CEO,Apache Kylin开源项目的创始人,同时也是这个项目的项目管理委员会主席,以及Apache软件基金会会员. 一.超大规模数据分析的挑战 Hadoop 首先,我想和大家分享一下我们在大数据技术领域碰到的挑战,这里在座很多朋友都是从传统的数据仓库出来的,事实上以前是没有Hadoop的,因此数据并不是很大,我记

多技术构架大数据存储应用

多技术构架大数据存储应用 英特尔公司 徐民先 在安防行业,大数据时代引发诸多技术革命,对于监控存储企业面临诸多挑战,如何解决是业界为之关注话题. 大数据时代的存储方式 英特尔的理念是在端到端的安防行业,全面实现数据价值的挖掘.所谓"端到端",包括前端视频采集.分析,存储以及后端数据中心处理.区别于单个设备的解决方案,英特尔以其优越的性能.灵活的设计为设备制造商和系统集成商提供整套系统化解决方案,从数据获取.存储.分析到应用各个层面均有覆盖.从硬件角度,英特尔提供的全系列处理器涵盖入门级

Teradata迎向大数据再获业务新突破

[文章摘要]Teradata天睿公司(Teradata Corporation,美国纽约证券交易所交易代码:TDC)大中华区CEO辛儿伦先生昨天在北京主持召开了媒体见面会,详细介绍了Teradata天睿公司今年上半年相当不错的成绩,并和与会媒体一同分享了公司在技术及服务层面近期收获的成果和产业趋势透析. 截至2011年6月30日的财报显示,Teradata天睿公司第二季度全球营收增长24%,创历史新高,而大中华区则再次实现了高双位数成长,赢得了来自银行,通信,制造.证券.保险.航空.运输.零售.

H3C技术总监:数据中心安全要求有“三高”

H3C 安全产品线技术总监 李颖和: 随着IT应用程度的日益提高,数据中心对于客户的价值与日俱增,相应的,数据中心的安全建设也迫在眉睫.面对日益繁复的应用和日渐频繁的外部攻击,一个好的数据中心除了应对数据的存储和传递之外,能否保证数据的安全性也是衡量其合格与否的重要标志.而面对不断变化的外来攻击,数据中心的建设对安全也有了更高的要求. 安全需求的四个维度 数据中心的安全需求有些是通用性的,如分区和地址规划问题.恶意代码防范问题.恶意入侵问题等;有些是独有的保密性需求,比如双层安全防护.数据库审计

费埃哲CTO:大数据已开始为企业解决棘手问题

目前市场而言,大数据的价值被扩大到无数倍.企业可以通过大数据从而更广泛的来了解实时信息并做出决策,另一方面,多样化和瞬时变化的数据也给优化工作提出了巨大挑战.费埃哲公司发布了最新版FICO Xpress优化套件.这套开发和优化软件可有效解决规模庞大且构成复杂http://www.aliyun.com/zixun/aggregation/14294.html">的大数据问题,以帮助各类机构做出最佳商业决策.FICO Xpress优化套件7.5版是FICO Decision Platform(