大数据来袭 Informatica道出应对良策

什么是大数据"Big Data"?

  我们生活在一个信息爆炸时代,我们每天都会接收到多种的信息:短信、邮件、电话……,我们每天也在生产多种的信息:微博、博客、FRID……。各种各样的信息充斥着这个世界,我们该如何应对和利用好如此庞大的信息?这些问题带来的挑战,让业界对"大数据"的热情达到了前所未有的高度。不久前,记者参加了领先的企业数据集成软件独立供应商Informatica公司举行的研讨会,与Informatica中国区首席产品顾问但彬先生深入交流了有关大数据主题的内容。

Informatica中国区首席产品顾问但彬

  什么是大数据"Big Data"?

  尽管"Big Data"可以翻译成大数据或者海量数据,但大数据和海量数据是有区别的。Informatica中国区首席产品顾问但彬认为:"大数据"包含了"海量数据"的含义,而且在内容上超越了海量数据,简而言之,"大数据"是"海量数据"+复杂类型的数据。

  大数据包括交易和交互数据集在内的所有数据集,其规模或复杂程度超出了常用技术按照合理的成本和时限捕捉、管理及处理这些数据集的能力。大数据是由三项主要技术趋势汇聚组成:

  海量交易数据:在从 ERP 应用程序到数据仓库应用程序的在线交易处理(OLTP)与分析系统中,传统的关系数据以及非结构化和半结构化信息仍在继续增长。随着企业将更多的数据和业务流程移向公共和私有云,这一局面变得更加复杂。

  海量交互数据:这一新生力量由源于 Facebook、Twitter、LinkedIn 及其它来源的社交媒体数据构成。它包括了呼叫详细记录(CDR)、设备和传感器信息、GPS 和地理定位映射数据、通过管理文件传输(Manage File Transfer)协议传送的海量图像文件、Web 文本和点击流数据、科学信息、电子邮件等等。

  海量数据处理:大数据的涌现已经催生出了设计用于数据密集型处理的架构,例如具有开放源码、在商品硬件群中运行的 Apache Hadoop。对于企业来说,难题在于以具备成本效益的方式快速可靠地从 Hadoop 中存取数据。

  具体到一家企业/机构,对于大数据没有明确的规模定义,不过通常其数量介于几十个太字节到多个拍字节之间。一项由 Unisphere Research 对531名独立 Oracle 用户进行的调查发现,百分之九十的企业的数据量在迅速上涨,其中16%的企业每年的增长率达到50%或更高。

  不少企业已经感受到失控数据增长对绩效造成的冲击。一项由 Informatica 赞助的 Unisphere Research 调查发现87%的受访者将企业的应用程序性能问题归咎于不断增长的数据量。

  

(责任编辑:蒙遗善)

时间: 2024-09-23 14:12:03

大数据来袭 Informatica道出应对良策的相关文章

大数据来袭 传统IT厂商紧握Hadoop机遇

本文讲的是大数据来袭 传统IT厂商紧握Hadoop机遇,大数据时代已经来临,并悄悄的影响着我们的生活.根据IDC最近一项研究显示,在Facebook上每20分钟就有100万个新链接被分享,1000万条用户评论被发布.Facebook和其他所有互联网网站.互联网应用,已经逐渐变成了整个数据采集.分析.处理.增值的数据架构. 在中国,社交网络同样如火如荼.新浪副总裁王高飞就曾表示,新浪微博的注册用户已超过3亿,用户平均每天发布超过1亿条微博内容,相当于每10个中国人里面,就会有一人每天发布一条微博.

企业互联网时代下的大数据构建之道

文章讲的是企业互联网时代下的大数据构建之道,"现在企业互联网化正在迅速渗透到企业以及所处的产业链和生态圈中,借助互联网,企业可以更容易与前端供应商.服务商包括后端客户.最终客户建立密切的联系.在此过程中新的业务模式包括供应链优化.智能制造.产业链协同.电子商务等正在不断兴起并迅速发展." 用友网络科技股份有限公司助理总裁,兼集团iUAP中心副总经理谢东在接受记者采访时说道. 企业互联网化 大数据成为核心资产 企业互联网化已经成为一种趋势,它正在改变着企业的传统的业务模式,使得企业内部运

华为存储系统 大数据解决之道

随着近年来互联网.云计算.移动终端和物联网的迅猛发展,全球在2010 年正式进入ZB 时代.随着大数据时代到来,海量,多类型数据的存储.分析.容灾.备份以及统一管理都对传统架构产生了很大的冲击. 大数据时代,华为推出了大数据解决之道:华为OceanStor MVX存储系统(以下简称MVX).MVX系统是融合Scale-out NAS.Scale-out Database和Scale-out Backup,实现多位一体,面向大数据存储的集群存储系统.MVX在一个系统内实现了分布式存储.分布式备份以

工业4.0不遥远 沃尔核材大数据应用之道

文章讲的是工业4.0不遥远 沃尔核材大数据应用之道,大数据到现在可以说在概念上已经无人不知无人不晓,也萌生了很多技术提供商,但是在用户端真正明白如何用,有实际的成功应用案例的并不多,这一方面体现了技术落地应用的时间线性规律,也体现了新技术在应用方面的门槛,以及结合不同应用场景下的创新能力.另外值得一提的是,IT选型和逛街买衣服没有本质区别,除了个性化元素之外,朋友穿什么牌子可以借鉴参考.因此,如何发挥企业的主观能动性,让新技术应用周期缩短,让企业更快的看到应用成果,是我们做行业沙龙/会议的真正价

用"数据"说话 从SACC看大数据应用之道

文章讲的是用"数据"说话 从SACC看大数据应用之道,正如<大数据的冲击>的书中提到的那句话:"Google.Amazon.Facebook.Twitter,这些称霸全球互联网的企业,它们的成功都具备一个共同的因素,你知道是什么吗?"当然不是商业模式,因为他们的商业模式不尽相同.当然也不是客户服务,尽管这个很重要,那这其中最重要的共同点恐怕就是大数据技术的应用. 曾经有人说互联网将改变很多的行业,但在热衷大数据技术的人眼里,真正改变那些行业的并不是互联网

大数据产业正走出“深闺”,为生活带来“质”的变化

大数据将是企业做法的关键因素,无论企业是在线注册的办公地址还是实体公司.它将帮助企业解读所有的信息,以帮助预测企业的营销趋势.以下探索一下2017年大数据可用于向千禧一代推广的许多方式. 在大数据帮助下,异地专家可对病情进行实时分析和精确诊断;晃晃智能手环,街道两侧商铺信息全部展现,购物变得更加轻松."随着大数据应用普及,这样的智能生活将随处可见."体验中心一名工作人员说. 你的生活是由什么连接,一段段日子,还是一个个朋友?未来,沟通你我的还有一个个数据.随着科技进步与应用,大数据产业

解读PWorld2014大会关键词 大数据来袭

ZDNET至顶网CIO与应用频道 05月08日 北京消息:2014年5月20日,全国顶级的技术盛会"PWorld2014软件架构&平台创新大会"即将在北京拉开大幕,众多业内权威专家应邀成为大会的演讲嘉宾.同时,来自全国各行业的上千名CTO.CIO.架构师.技术经理.开发工程师等技术相关人员将齐聚一堂共同探讨和交流信息科技的前沿技术.大数据来袭.应用架构在变.流程无处不在.移动开发"革命".云计算从哪开始.激活开放平台成为PWorld2014软件架构&

4G和大数据让山西走出一条移动医疗道路

 4G和大数据的发展衍生出许多新应用.在医疗领域,山西移动走出了一条独特的道路,在病人找医生的大环境下开了"医生找病人"的先例,这就是山西省村医服务能力提升项目(村医通).该项目由山西省卫计委与山西移动合作,目前有2.9万名村医"入驻". 点点手机把医生"叫"到家 "一天两次,一次两颗,记住啊."5月15日下午1时,吕梁市离石区凤山街道凤山底村卫生所内,张建强大夫一边取药一边对一位感冒患者说.送走患者,张建强拿出手机,打开&q

大数据来袭 传统数据库的Hadoop梦想

大数据时代已经来临,并悄悄的影响着我们的生活.根据IDC最近一项研究显示,在Facebook上每20分钟就有100万个新链接被分享,1000万条用户评论被发布.Facebook和其他所有互联网网站.互联网应用,已经逐渐变成了整个数据采集.分析.处理.增值的数据架构. 在中国,社交网络同样如火如荼.新浪副总裁王高飞就曾表示,新浪微博的注册用户已超过3亿,用户平均每天发布超过1亿条微博内容,相当于每10个中国人里面,就会有一人每天发布一条微博.每位用户的平均在线时长为60分钟,活跃用户中有60%通过