端到端:IBM大数据方案解析

从IBM的大数据平台框架和应用程序解决方案可以看出,其中大数据平台包括4大部分:信息整合与治理组件、大数据的核心处理平台(包括基于开源Apache Hadoop的框架而实现的BigInsights平台、流计算平台、数据仓库、语境搜索等四部分)、加速器,以及包含可视化与发现、应用程序开发、系统管理的上层应用。

IBM软件集团大中华区信息管理软件总经理卢伟权

IBM软件集团大中华区信息管理软件总经理卢伟权先生表示,除了传统上提到的大数据量(Volume)、多样性(Variety)、速度(Velocity)之外,数据的真实性(Veracity)在未来的大数据应用中会越来越重要。“社交数据、企业内容、交易与应用数据等,超越传统的数据源,这些都需要有效的信息治理来确保其真实性及安全性。”他说,“IBM除了可以对传统的数据仓库和数据信息进行管控和审计,也可以对来自不同信息源的大数据信息进行真实性审核并实现有效管控,这也是IBM在业界特别强于其他厂商重要的维度。”

据悉,实现信息整合和治理的组件是Guardium,其数据治理部分有三大特色:首先,其主数据管理能够将来自不同数据来源的重复数据集中在一起管理;其次,每一个产品里面都有安全性管理;第三,通过一个整合的平台进行管理。目前,Guardium能够管理包括DB2、Netezza、Oracle、Sybase、Informix、SQLServer、SharePoint、Teradata、MySQL等在内的软件数据。

在此之上是IBM的BigInsights平台,此方案基于开源Apache Hadoop的框架实现,并增加了包括管理能力、工作流、安全管理等能力,并融入了IBM研究实验室的独特和领先的数据分析、机器学习技术以及文本数据分析挖掘。IBM表示,所有这些增强都是为了更好的使得该方案能适用于复杂的,海量数据的分析。“Hadoop平台上并没有相应的管理工具,也没有将不同的数据进行汇总的功能。”卢伟权说,“IBM借用过去几十年在数据库领域的经验,将数据库的管理办法也移植到大数据管理平台上,让Hadoop平台的可用性、可管理性、安全性都提高了很多。”根据不完全统计,IBM在Hadoop平台上至少新增了100个功能。

IBM大中华区软件事业部银行业解决方案高级顾问陈剑

不仅如此,BigInsights不仅支持目前最流行的x86平台,也能支持性能强劲的Power平台。“借助为Power平台优化的Linux系统,BigInsights能够在Power System上良好地运行。”卢伟权说,“这就使大数据方案在分布式处理能力的同时,还能充分享受到Power系统的高性能。”IBM大中华区软件事业部银行业解决方案高级顾问陈剑补充说,“IBM的BigInsights方案是非常开放,不仅能够支持标准Hadoop,也能支持一些主流Hadoop发行版,例如Cloudera Hadoop。这就意味着客户可以从第三方平滑地移动到IBM企业级Hadoop平台上。”作为对比,Oracle的大数据方案,明确要求应用Oracle公司优化过的Hadoop版本。

不过,“BigInsights并不是对数据仓库的替换方案,它是对传统数据仓库的一种补充和延伸,整体构成一个更广义的Internet级别的海量数据仓库。”陈剑先生说。

时间: 2024-09-27 06:55:20

端到端:IBM大数据方案解析的相关文章

详解IBM大数据应用五大方向

摘要:IBM全球副总裁王阳博士详解IBM大数据应用的五大方向:探索大数据发现和业务相关的兴趣点.全面了解客户优化每次客户互动.分析海量机器数据提高运营效率.利用IT新技术从现有数据仓库中获得更多价值并降低成本.分析大数据所有类型和来源强化传统安全方案. IBM公司2013年中在北京正式发布了PureData System for Hadoop系统.新增BLU加速技术的DB2  10.5.物联网数据分析平台MessageSight以及定制Watson (Watson Engagement  Adv

激发数据价值 IBM大数据深耕华南

ZDNet至顶网软件频道消息:8月15日,IBM大数据与分析高峰论坛在广州举行.IBM宣布其大数据与分析在华南区域的实践获得广泛成果,为越来越多的华南企业提供可视.可应用.可落地的大数据部署方案,实现产业转型和价值突破. IBM大中华区大数据和分析及新市场总经理,全球企业咨询服务部合伙人.副总裁Jason Kelley表示:"经过过去几年的认知和探索阶段,企业已经逐步明确数据作为二十一世纪新自然资源的巨大价值.大数据与分析成为提升企业竞争力的绝对优势,进行转型和创新的巨大动力.作为大数据领域的领

IBM大数据深耕华南 激发数据价值

今日,IBM大数据与分析高峰论坛在广州举行.作为大数据与分析领域领导者,IBM宣布其大数据与分析在华南区域的实践获得广泛成果,为越来越多的华南企业提供可视.可应用.可落地的大数据部署方案,实现产业转型和价值突破. IBM大中华区大数据和分析及新市场总经理,全球企业咨询服务部合伙人.副总裁Jason Kelley先生表示:"经过过去几年的认知和探索阶段,企业已经逐步明确数据作为二十一世纪新自然资源的巨大价值.大数据与分析成为提升企业竞争力的绝对优势,进行转型和创新的巨大动力.作为大数据领域的领导者

陈奇:IBM大数据的战略和技术优势

本文讲的是陈奇:IBM大数据的战略和技术优势,当前,行业对于"大数据"的关注疾速攀升,这并不亚于数据本身的增长程度.您是否想过,我们看到的"谈大数据色变"或许只是个表象,走在行业前列的企业早已开始默默挖掘大数据中蕴含的"金矿",为自己的业务飙升迈出制胜一步. 作为行业引领者,IBM一直走在新趋势的前沿,对于大数据更是全力融合创新技术与行业经验助力客户梳理大数据概念,选择战略方向,制定方案策略,实现行业落地:今年5月,IBM智慧的分析洞察正式发布,

大道之行 数据为赢 IBM大数据深耕华南

2014年8月15日,IBM大数据与分析高峰论坛在广州举行.作为大数据与分析领域领导者,IBM宣布其大数据与分析在华南区域的实践获得广泛成果,为越来越多的华南企业提供可视.可应用.可落地的大数据部署方案,实现产业转型和价值突破. IBM大中华区大数据和分析及新市场总经理,全球企业咨询服务部合伙人.副总裁Jason Kelley先生表示:"经过过去几年的认知和探索阶段,企业已经逐步明确数据作为二十一世纪新自然资源的巨大价值.大数据与分析成为提升企业竞争力的绝对优势,进行转型和创新的巨大动力.作为大

2014 IBM大数据客户大会文思海辉受邀分享实践

2014年7月16日-18日,由IBM举办的"大数据客户大会"在天府之国成都拉开帷幕,本次大会由两个主题:业务分析(BA)用户大会和信息管理(IM)用户大会共同构成,联袂为IAG客户烹制出大数据与分析的饕餮大餐.会议期间,作为IBM大数据领域重要合作伙伴,国内领先的大数据解决方案服务商Pactera(以下简称:文思海辉) 受邀参会,并分享了在数据仓库和商业智能方面的行业最佳实践经验. 7月16日业务分析(BA)用户大会主要围绕IT行业市场的数据未来趋势进行了深入探讨,并对当今大数据环境

IBM大数据成就飞鹤一贯好奶粉

ZDNet至顶网软件频道消息: IBM.北京汉端科技有限公司(以下简称:汉端科技)与中国飞鹤乳业集团(以下简称:飞鹤乳业)联合宣布,通过利用IBM全面大数据与分析能力,和汉端科技在商业智能领域丰富的行业经验,飞鹤乳业实现了产品的可追溯与食品安全的数字化管理,完成了系统数字化.透明化.服务化的升级.此外,该系统也是中国乳品行业运用大数据技术实现对产品质量管控.为用户提供追溯服务的一种崭新的模式探索,是乳品行业全产业链食品安全管理体系建设的首个尝试,对于食品安全体系的完善和乳品行业信息化转型具有指导

IBM大数据解决用水问题

IBM与南非茨瓦内市合作推出一个众包项目,来帮助捕捉.分析南非配水系统的信息.民众通过http://www.aliyun.com/zixun/aggregation/12459.html">移动客户端和短信发送社会参与这个项目,可以通过这个项目报告漏水.失效的水管和给水渠道的总体情况.每条更新都会为"WaterWatchers"的移动端应用的分析报告提供重要的数据点,来解决南非配水系统中的问题. 用户可以使用WaterWatchers拍摄图片.回答三个关于给水河道的简单

尖峰对话专家 IBM大数据平台差异化优势

本文讲的是尖峰对话专家 IBM大数据平台差异化优势,当前,行业对于"大数据"的关注疾速攀升,这并不亚于数据本身的增长程度.您是否想过,我们看到的"谈大数据色变"或许只是个表象,走在行业前列的企业早已开始默默挖掘大数据中蕴含的"金矿",为自己的业务飙升迈出制胜一步. 作为行业引领者,IBM一直走在新趋势的前沿,对于大数据更是全力融合创新技术与行业经验助力客户梳理大数据概念,选择战略方向,制定方案策略,实现行业落地:今年5月,IBM智慧的分析洞察正式