能否成功利用大数据,是商务变革的关键

大数据时代已经到来,如何处理和利用庞大的信息,是众多企业所面临的新问题。

现在,众多的社会活动及企业活动都离不开IT,而在这些活动中必然产生庞大的信息。随着移动宽带和移动通信产品的日益普及,更加速了这一趋势。“信息爆炸”要求企业系统能够正确分析和处理大量而复杂的信息数据,但是,依靠以往的技术则很难做到。

只有能解决大数据问题的企业,才能从商务变革中获得商机。

要知道,大数据的种类多种多样,比如,在进行金融交易、购买、服务活动时,在记录器上以及产品制造过程中都会产生数据;如果能够快速处理这些数据,不仅现有的产品及服务的效率得到提高,而且以往的人工业务也通过计算机自动化,得以改善或提供崭新的服务。这样一来,不同的商务领域,都将发现新的商机。

处理大数据的系统要做到:

处理庞大的数据; 快速处理数据; 根据数据规模,灵活扩展; 满足费用的合理。

只有同时满足以上4个条件,企业才能从大数据中获得商业利益。以往的技术能处理数百GB的数据,但是处理百万亿兆规模的数据时,就会遇到诸如无法应对、处理能力不足、无法灵活扩展以及耗费成本等问题。

从技术层面,在满足商业利益的前提下,能够解决上述问题的关键是内存即采取利用RAM(随机存取存蓄器)处理数据的方法。在以往的硬盘驱动器上,无法满足现有的性能要求。即使是速度更快的固态硬盘(SSD)和闪存也是远远不够的。可以利用比HDD性价比更高的RAM。RAM具有HDD、SSD和闪存无法比拟的性能。

而且,软件方面Java是解决很多问题的关键。Java具有垃圾回收(GC)这一优良的数据管理功能,即当需要分配的内存空间不再使用时,JVM将调用垃圾回收机制来回收内存空间,从而大大提高内存的利用效率。但是GC也有它的问题,就是当通过GC内存得以释放时,应用软件也会停止。

虽然随着64(bit)中央处理器的普及,相当容量的内存是能够分配的,但是内存量越大,因GC而引起的软件停止时间也就越长。对于要求具备更高性能的系统而言,这是致命的弱点。处理大数据的系统必须解决这个问题。

Terracotta已成功地开发出能够快速处理大数据的技术。在利用Java应用软件的同时,包括财富2000在内的50万以上的商业用户采用了大数据解决方案,并取得很大的成效。

Terracotta提供的解决方案中,核心产品有两个。一是Enterprise Ehcache(缓存),它是通过Java商务系统,把大量的数据存储在外部高速缓冲存储器内,以提高应用软件的性能。二是BigMemory,它支持进程内的堆外缓存,可用来存储应用相关的大批量数据。

通过这两项产品实现的内存数据管理环境,并不依赖于特定的操作系统和Java环境以及数据库。当把这两个产品安装于软件服务器和数据存储区之间时,后部的各种数据库数据库就变成一个抽象化的巨大数据库,能快速处理数据库里的数据和文件。

安装于Java记忆領域外部时,GC(垃圾回收机制即自动内存)的前述的問題也就迎刃而解了。

与此同时,此项数据管理环境,是在产品服务器上运行,通过增加服务器,使数据放置区域Scale Up。经过这个方法,上述4个问题可以同时得到解决。

Terracotta客户中,比如VISA和提供在线支付服务的PayPal,为了解决因信用卡和在线结算而产生的不正行为问题,就利用了Terracotta的大数据解决方案。

在检查不正行为时,需要对庞大的数据进行高速的分析处理。以往虽然使用高价的硬件和数据库,但其效果却不尽人意。各公司在利用Terracotta大数据解决方案后,成功地创造了及时分析数TB数据的环境。

VISA过去处理1件不正行为,通常需要花费十几分钟,而利用我们的大数据解决方案后,所需时间缩短到仅仅几秒钟。

除此而外,澳大利亚最大的通讯公司Telstra 就用CRM(客户关系管理系统),管理绝大部分的顾客信息。运用大型电脑和开放环境的RDB(关系数据库)处理CRM时,因为需要参照数据库内的客户信息,所以处理一件平均要花费30秒。由于公司和顾客之间的95%的点击来自客服中心,公司在运营客服中心上每年都要投入10亿美元。公司曾经考虑将客服中心转到网站上,但因参照顾客信息还是要花费30秒而不得不放弃。

在此情况下,该公司就启动了Terracotta大数据解决方案,采取了将数据库中的顾客数据内存后再加以处理的方式。通过这种方式,成功地把参照处理所需时间缩短到30毫秒。预计,几年后公司顾客信息的规模将从目前的10TB,增加到100TB。

这样,TelstraCRM系统的速度得以提高后,在成功地降低成本的同时,服务也得到提高。公司认为,利用Terracotta大数据解决方案将会解决解约问题,并通过实施交叉销售,大幅度提高销售额。

由此可见,该公司的内存数据库管理的解决方案,不仅可以解决以往的问题,还可以成为推动商务变革的巨大动力。

本文作者是美国Terracotta公司总经理,他是商务软件方面的专家,有着20年以上的工作经验。在他的领导下,Terracotta在处理大数据方面成效显著。目前,Terracotta为世界众多由于“信息爆炸”而面临商务变革的企业提供解决了方案。

(责任编辑:吕光)

时间: 2024-10-27 03:50:18

能否成功利用大数据,是商务变革的关键的相关文章

利用大数据取得成功的7条建议

就在您认为大数据不可能再变大时,它还在不断变大. 无论其实际大小,大数据正在显示价值. 各个地方的组织都有各种形态与大小的大数据. 这些组织意识到其重要性.机遇以及给予关注的迫切需要. 很显然,无论忽略与否,大数据都会不断发展. 已掌控大数据(在明了其价值前储存的多结构混乱数据)的组织正在提升组织效率.提高收益,并发展新的业务模式. 他们是怎样做到的? 这些机构成功的方法可以总结为七条建议. 1.以短期考虑促进长期考虑 担心能否跟上大数据的潮流的人,不止您一个. 一切都瞬息万变,因此无从知道今年

利用大数据取得成功的 7 条建议

就在您认为大数据不可能再变大时,它还在不断变大.无论其实际大小,大数据正在显示价值.各个地方的组织都有各种形态与大小的大数据.这些组织意识到其重要性.机遇以及给予关注的迫切需要.很显然,无论忽略与否,大数据都会不断发展. 已掌控大数据(在明了其价值前储存的多结构混乱数据)的组织正在提升组织效率.提高收益,并发展新的业务模式.他们是怎样做到的?这些机构成功的方法可以总结为七条建议. 1.以短期考虑促进长期考虑 担心能否跟上大数据的潮流的人,不止您一个.一切都瞬息万变,因此无从知道今年或明年哪些工具

怎么利用大数据产生价值、驱动变革?瞧,这有答案

大数据怎么在业务里面产生价值,又是如何驱动业务变革的? 首先分享一个观点,大数据本身是一个业务问题,绝对不是一个简单的技术问题.今天讲大数据的技术也是从业务里面孵化出来的,最早大数据的起源来自谷歌,谷歌需要去检索整个互联网上的海量信息,这背后要有足够的计算能力和技术来支撑它做这个事情,后面才有大数据的概念出来. 业务需求倒逼技术发展 对于阿里巴巴而言也是一样的,今天阿里最典型的业务就是金融业务,数据显示阿里从最开始做小贷的业务,到2014年的时候计算量就翻了数十万倍.随着业务的指数级增长,客户越

IBM推新商务咨询服务和软件 助企业利用大数据 - 新闻中心

[赛迪网讯]3月23日消息,据国外http://www.aliyun.com/zixun/aggregation/31646.html">媒体报道,IBM周五(3月22日)发布了新的商务咨询服务和软件.这个服务和软件将帮助企业高层决策者预测和防止供应链中断造成的损失. 通过IBM的预测性分析软件和商务咨询服务,这个新的解决方案将利用仪表化设备中的大数据并且发现生产流程中的异常情况,发现产品的异常并且在发生问题之前预测广泛的设备性能风险. 在设备的整个生命周期内运行.维护和管理这些设备是一笔

合理利用大数据 助力中国各产业加速发展

随着物联网的应用及智慧产业的爆发,"大数据"这个词汇再次高频度地出现在人们的视线中,围绕大数据做文章也相应催生出了农业大数据.工业大数据.健康大数据.旅游大数据等一批行业领域的大数据概念.作为各行各业智能化变革的重要组成部分,"如何利用大数据"成为传统企业和新兴互联网厂商争相涌入的新一片蓝海. 合理利用大数据助力中国各产业加速发展 智慧产业的应用简单来说,需要依托传感前端的智能感知或者数据采集,经过数据筛选.分析等处理,最终根据业务需求提供服务应用的一个过程.其中,

看ZARA亚马逊沃尔玛如何利用大数据

  大数据时代正在以我们可感知的方式到来,无数公司和创业者都纷纷跳进了这个狂欢队伍.   <连线>杂志(台湾版)最新制作了一期大数据特刊,其中涉及到三家零售公司.这三家公司很有代表性:ZARA,一家发家于线下的快时尚品牌商:亚马逊,电商巨头:沃尔玛,全球最大的传统零售企业.   这组报道从不同角度来分析它们是怎么利用大数据的:ZARA运用大数据让自己既有的快时尚模式如虎添翼:亚马逊实现基于大数据的精准营销:沃尔玛分析社交网站海量数据上显露的消费者偏好与需求.   它们在三个方向上的实践样本也许

让我们激情利用大数据 挖掘商业洞察

本文讲的是让我们激情利用大数据 挖掘商业洞察,当前,伴随电子商务.移动互联网.社交媒体的飞速发展,以及智能手机.平板电脑和3G网络的普及,企业随时面临着数据爆炸的环境.超级互联的社会.愈加苛求的客户以及持续创新的压力.这不仅增强了企业对于更广阔的市场.灵活的基础架构,也推动了移动应用.云计算.大数据及敏捷开发等新技术趋势的产生与发展.对于软件产业而言,这些新趋势在为企业带来可供实践的新思路和新手段的同时,也为软件业带来更多的机遇和更严苛的挑战. 大数据 企业热点 在众多的软件发展趋势中,我们看到

美国联邦机构利用大数据的五个例子

在采用大数据策略方面,虽然私营部门发挥了模范带头作用,但公共部门也做出了不少成绩.本文列举了美国联邦机构和地方政府机构制定和运用大数据策略的几个例子,涵盖欺诈检测.金融市场分析.健康研究.政府监督.教育.犯罪学.环保和能源勘探等领域. 引言 本文是一组系列博客的第四篇文章.这组文章探讨的是政府在实施大数据策略时所面临的若干问题.第一篇文章解释了数据的"大"为什么应该按照复杂性而不仅仅是体量来定义.第二篇和第三篇文章讲述了大数据策略为公共机构摆出的四个挑战. 以下是美国联邦机构和非联邦机

大数据推动高等教育变革

随着互联网和物联网的快速发展和广泛应用,世界处于各种数据指数式增长的环境中,进入大数据时代.大数据日益成为推动各个领域变革的强劲力量.从高等教育领域来看,大数据在教学.科研和管理方面引发的创新与变革日益显现. 在教学方面,大规模.开放式在线教育课程--慕课,正在成为席卷全球的高等教育新潮流.慕课教育技术被认为是继印刷术之后教育领域最重大的变革,其带来的学习变化体现在四个方面:第一,慕课对学生免费,或者只对需要课程认证者收取少许费用,极大地降低了教育成本:第二,慕课打破了传统课堂教育的时空限制,无