大数据时代,全闪存势不可挡

 

 【51CTO.com原创稿件】笔者的朋友,一位金融行业的IT负责人不止一次跟笔者抱怨他们私有云平台的计算性能越来越差,虽然还不至于影响到日常业务的开展,但是像数据分析这类核心的业务已经受到了一定程度的影响,处理数据所消耗的时间越来越长。朋友表示,公司已经对内部服务器进行了换代升级,虽有所改善,但根本问题仍然没有得到解决。那么,问题出在哪儿呢?

通过了解,笔者判断问题的根本出现在老旧的存储系统上。据朋友介绍,在升级服务器的过程中,并未更换存储系统,也从未考虑过存储系统会对计算性能产生影响。

此类的问题,相信很多企业都曾遇到过。那么,存储系统为何会成为影响数据分析业务的主要瓶颈?企业应该如何对存储系统进行升级改造?接下来,笔者将一一解答。

一、大数据时代,别让存储成为系统瓶颈

在处理系统性能问题的过程中,很多IT技术人员会优先排查CPU、内存等核心配件,往往最容易忽视存储。正是由于这种根深蒂固的思维逻辑,最终导致配件换了一茬又一茬,故障仍然没有得到完善的解决。

大家知道,存储的发展要明显滞后与CPU、内存、网络等产品,大部分IT技术工程师都非常了解这一状况。但是,由于过去大家对存储系统的要求不高,只要满足存储容量和安全可靠即可,因此,在过去很长的时间里,存储厂商都在致力于存储容量的提升,在读写性能的研发方面并没有投入太多的精力。不过,在大数据时代,这一格局被彻底打破了。

大数据时代,数据价值被逐渐放大。借助数据,企业可以快速分析用户需求,洞察市场变化,指导决策并抓住商机,获取利润,高速发展。在这样的时代背景下,存储系统不但要具备更大容量的存储需求,而且还要以更高的性能来应对数据分析和挖掘带来的挑战。为此,传统的机械硬盘显然已经无法满足要求,企业必须尽快部署性能更加强大的全闪存存储系统。

与传统机械硬盘相比,全闪存阵列能够大幅提升企业存储系统的性能。传统机械硬盘的存储系统性能大部分都在200 IOPS左右,顶级全闪存存储系统,像IBM FLashSystem系列全闪存阵列,可以提供500000到1000000 IOPS,这对于传统的磁盘阵列来说是遥不可及。

因此,在大数据时代,即使你的服务器拥有强大的计算性能,如果老旧的存储系统不升级改造,那么IT系统仍然无法满足需求。所以,对于企业来讲,拥抱大数据,必先拥护全闪存存储。

二、全闪存存储的成本太高,并非如此

一些朋友在跟笔者聊天时提到,虽然全闪存的优势非常明显,但高昂的拥有成本,成为影响全闪存普及的主要绊脚石,这也是很多企业将之拒之门外的一个重要原因。

笔者分析认为,如果从每GB的对比成本来看,全闪存的价格确实要比机械硬盘贵很多。但是,如果从整体拥有成本(TCO)来看,全闪存非但不贵,甚至还要便宜一些。主要原因有以下几点。

其一,全闪存的发热量更小,功耗更低。由于取消了机械部件,全闪存相比机械硬盘来讲有着更低的发热量和功耗,能够更好的为企业节省能源开支。千万别小看能源支出,据统计能源消耗已经成为企业主要的成本开支之一,特加是对于数据中心来讲,除了设备本身的功耗外,在散热辅助设备方面的投资也相当惊人。因此,从能耗方面来讲,全闪存有着明显的优势,至少能够比机械硬盘节省一半以上的能源开支。

其二,全闪存更易于扩展,其较小的体积在同样面积内可以部署更多的产品。另外,由于性能方面的优势,能够大幅降低企业的部署时间,加快业务的上线。

其三,由于不存在机械部件,全闪存的可靠性更高。当然,也许会有人说闪存的擦写寿命决定了其不可能取代传统存储,殊不知,目前全闪存阵列大都采用MLC闪存颗粒,并且厂商通过使用软件和更好的写入技术提升了MLC的性能和可靠性,虽然寿命没有机器硬盘的寿命长,但也并没有人们想象的那么夸张,即使在现在,一些专门设计的闪存写入寿命可以达到100万甚至500万,整体寿命在20万年以上。因此,完全没有必要担心全闪存阵列的寿命。

最后,全闪存的价格正在逐步降低。随着技术的发展,全闪存每GB的成本正在不断降低,存储性能将会大幅提升,发热量和占用空间将会进一步减少。

三、全闪存品牌产品众多,怎么选?

对于全闪存品牌与产品推荐,也是很多朋友非常关心的话题。目前,众多存储厂商纷纷推出了旗下的全闪存存储产品,品牌多,产品杂,选择起来确实不是一件容易的事情。

笔者建议,大家在购买全闪存产品时,一是要选择一线品牌的产品,以确保产品品质;二是要结合自身的业务情况,有针对性的选择产品,以获得最佳的性能和最少的投放;三是要重视技术支持和售后服务,以保证在部署和使用过程中得到厂商的大力支持和帮助。

例如IBM,在全闪存领域已经耕耘多年,针对不同的应用场景,推出了一系列的产品解决方案,如针对性能加速解决方案推出的IBM FlashSystem F900,针对虚似化存储解决方案推出的IBM FlashSystem V9000、IBM Storwize V7000F、IBM Storwize V5030F等产品,很好的满足了不同用户的需求。

写在最后:大数据时代,存储已经不再仅仅扮演数据仓库的角色,越来越多的企业已经认识到了存储系统的重要性。目前,全闪存阵列已经普遍应用到金融、制作、交通、医疗等各个领域,并且很多互联网公司也已经开始部署和应用全闪存阵列,这充分说明全闪存阵列已经得到了充分的肯定和认可。可以肯定的说,未来存储发展,全闪存势不可挡。

 

 作者:ZC

来源:51CTO

时间: 2024-09-18 17:46:53

大数据时代,全闪存势不可挡的相关文章

大数据存储下闪存与硬盘的选择

随着工业革命的发生,科技的日新月异,人们选用的存储介质也发生了较大的变化,硬盘开始成为人们日常生活工作中的必备品,并在数据存储中扮演着重要角色.但是近年来,由于社交网站.智能移动终端的不断普及,人们创造出来的数据量是惊人的,据统计2013年光中国产生的数据总量就已经超过0.8zb(相当于8亿tb),在海量数据的压力下,数据的存储介质会发生什么改变?企业面对海量数据如何改造升级传统数据中心来满足业务运营的需求?新兴的互联网巨头公司又该如何解决自身庞大数据的存取难题?这些亟待解决的问题是用传统手段,

IBM强化全闪存实力 专注云和服务质量

IBM本周三对全闪存阵列家族进行了扩充,增加两款新的高性能型号,专门用于将客户的IT环境与云连接起来.另外,还推出了一款针对高性能服务器和大型机服务器的新全闪存阵列,并表示今年年底预计会推出一个专门针对大数据环境的型号. IBM市场副总裁Eric Herzog表示,这次推出的新产品是IBM扩展在全闪存存储市场覆盖面的举措之一.我们看到全闪存阵列对于全方位的用户平台是很重要的,所以我们正在将这项技术扩大的大型机和云.因为IBM身处于一个竞争非常激烈的环境中,在全闪存存储阵列市场占有份额排名第二,仅

IBM发布面向大数据及非结构化工作负载的DeepFlash 150全闪存存储

IBM本周二扩大了自己的全闪存存储产品线,增加了一款瞄准大数据和其他非结构化数据应用的产品. "新推出的IBM DeepFlash 150计划从本周晚些时候开始出货,针对那些要求标准全闪存存储解决方案不具备的容量的应用."IBM存储系统.文件和对象存储产品总监Alex Chen表示. 大多数全闪存存储阵列专注于更为传统的应用,例如VDI虚拟桌面.块存储和在线交易处理等. 分析师告诉我们,有80%的数据都是非结构化的,大数据对于闪存存储来说是一个不同的问题.自有了大数据,数据就迈向了PB

全闪存存储时代 NVMe到底是什么?

在最近几年,介质发展突飞猛进,容量和性能都在持续快速提升,各大介质厂商都推出了高性能的NVMe SSD,几乎全球所有的存储大厂都在大力研发基于NVMe的新一代存储产品,一时间NVMe成了存储行业最热门的词汇. NVMe为闪存而生 NVMe是什么?它的全称为Non-Volatile Memory Express,是一种基于非易失性存储器的传输规范,NVMe规范由包含100多家公司在内的工作小组所制定.认识了NVMe之后,我们看看它到底有什么优势,一个字总结,那就是"快".形象的来说,NV

全闪存数据中心是什么样子的?

随着技术的进步和存储介质的成本不断降低,全闪存数据中心的概念也历经了多年的演变.结果就是,几乎每一家全闪存存储厂商都宣布,他们已经推出"实际成本"和基于硬盘的存储系统相当的闪存存储产品. 如果你选择相信厂商们宣称的硬盘成本对比逻辑并推而广之,结论就会是:任何组织都没有理由拒绝全闪存存储.想象一下,一个能瞬间响应每个IO请求的数据中心,而且完全无需区分数据类型!数据管理和性能优化的难题将一扫而光!全闪存存储系统的未来一片光明!总的来说,闪存介质的每GB成本持续走低,同时,管理这些存储系统

《原来如此》第四十八期:软件定义存储同全闪存、超融合等技术相辅相成

上一期<原来如此>我们和中桥国际总经理兼高级分析师王丛探讨了云计算的发展情况以及,混合云应该怎样规划部署.本期<原来如此>将就现在厂商都在推行的软件定义存储进行讨论,而且软件定义存储并不是单一的,他还伴随着全闪存.超融合等技术,多种技术正相辅相成的融合发展. 以下为访谈实录: 主持人:各位网友大家好,欢迎收看ZDNet至顶网视频访谈节目,今天我们很高兴邀请到了中侨国际的总经理兼高级分析师王丛,跟我们网友打个招呼. 嘉宾:各位网友大家好,非常高兴今天和ZDNet至顶网一起和大家谈谈存

IBM的Q416全闪存阵列营收超越Pure,后者排名第五

据IDC最新的企业存储数据显示,IBM的闪存阵列营收已经超过了Pure Storage,如今后者在市场上排名第五. Stifel分析师Aaron Rakers已经报道了IDC的2016年第四季度企业外部存储营收,从他的报告中,我们来着重突出一下全闪存阵列(AFA)的数据. 全闪存阵列供应商营收分别为: EMC--6.451亿美元; NetApp--2.792亿美元; HPE--2.049亿美元; IBM--1.884亿美元; Pure--1.690亿美元(根据计算所得); Hitachi--40

数据无界·存储无疆:大数据时代下,闪存已经势不可挡

近日,IBM在深圳召开"数据无界 • 存储无疆,IBM为大数据再造存储盛典"主题大会暨中国闪存联盟第三季启动仪式. 数据无界 • 存储无疆,IBM为大数据再造存储盛典 在"IBM为大数据再造存储盛典"上,IBM向与会嘉宾展示了全新的存储软件产品系列IBM光谱存储(IBM Spectrum Storage)和新一代全闪存解决方案IBM FlashSystem V9000.FlashSystem 900等产品,并介绍了自身在存储领域的新战略.新行动与新成果. IBM大中

Fusion-io: 全闪存超大规模数据中心时代的到来

 闪存比笨拙的磁盘驱动更能高效地优化性能,这一点如今已经很少有人质疑.然而,闪存的价格却使许多企业仅将其部署在处理关键应用程序和数据库的企业服务器上. 在2013年,由于闪存设备每千兆售价降至3.89美元(约25元人民币)以下,除了关键任务应用程序之外,互联网企业目前也可考虑利用闪存来驱动超大规模数据中心. 面向超大规模数据中心的闪存 既然现在闪存设备性能可靠又价格合理,那整个数据中心都可以部署,互联网企业也终于能够全面利用闪存所带来的应用加速能力,而这原先通常是只留给企业客户的.一些网络和云技