关于大数据时代传统商业存储的思考:中心存储与分布式存储的对比

今天和我们部门的老大1*1, 大家面对面沟通了一下到新的项目组的想法。而且也将我对传统商业存储在当前大数据云计算发展如火如荼的背景下,如何改进,融合交流了我的看法。

传统的商业存储,诞生于大型机,小型机时代。那时候将所有的硬盘集中的放到几个机架上,大型机通过光纤,ISCSI等高速连接到存储系统上。存储系统需要保证高并发,高IO读写速度,数据冗余备份等保护。

现在x86服务器,尤其是Google这种互联网公司都是通过廉价的硬件组装成高大上的集群,分布式文件系统(GFS,HDFS),各种基于内存的系统(memcached, GemFire, RAMCloud),它们都是通过相对廉价的硬件来构建了高并发,高读写速度,高可靠性(虽然每个节点有很高的故障率,但是集群可以快速failover 这种失败节点而使得整体的服务不受影响),高扩展性:这种它的天性。

显然,传统的商业存储需要适应这种计算发展的趋势,并且做出回应。

Open-Stack之所以受到各大存储厂商的追捧,在于OpenStack的Cinder可以方便的接入商业存储,也就是说,OpenStack所使用的存储系统仍然是各大商业存储系统。但是这个解决不了传统商业存储还是中心存储的劣势。也是它从跟不上不适应当前的云计算的大环境的根结。出路,或者是有将现有产品整合,真的是使用Software Defined Storage(软件定义存储),或者说是DataStorage as a Service。

当前我看到的只是存储厂商被动的去增加API,来被动的融入云计算的环境。我们应该需要转变,真正的实现软件定义存储,真正的去构建分布式的存储系统。希望,这些掌舵手可以把握好方向,也希望这次转型过后,我们依然能引导时代,进而改变这个世界。

查看本栏目更多精彩内容:http://www.bianceng.cn/database/storage/

时间: 2024-09-12 05:27:58

关于大数据时代传统商业存储的思考:中心存储与分布式存储的对比的相关文章

关于大数据时代传统商业存储的思考: 中心存储 VS 分布式存储

      尊重原创,转载请注明出处:http://anzhan.me ; http://blog.csdn.net/anzhsoft        今天和我们部门的老大1*1, 大家面对面沟通了一下到新的项目组的想法.而且也将我对传统商业存储在当前大数据云计算发展如火如荼的背景下,如何改进,融合交流了我的看法.        传统的商业存储,诞生于大型机,小型机时代.那时候将所有的硬盘集中的放到几个机架上,大型机通过光纤,ISCSI等高速连接到存储系统上.存储系统需要保证高并发,高IO读写速度

压轴论坛:大数据时代的商业变革

压轴论坛:大数据时代的商业变革 和讯科技消息 1月16日,2012中国互联网产业年会今日在京召开,本次大会的主题是"酝酿2013:在变革中掌握精彩",和讯科技进行全程报道. 以下为"压轴论坛:大数据时代的商业变革"实录: 主持人:高新民理事长 嘉宾:谢文知名IT评论人.徐明强 微软亚太研发集团windows Azure首席架构师.齐向东360公司总裁.姜奇平中国社科院信息化研究中心秘书长 姜奇平:对于大数据现在大家是众说纷纭,想听听大家的看法,高新民老师是中国互联网

大数据时代下商业调查展开全新变革

文章讲的是大数据时代下商业调查展开全新变革,"数据是新的石油."亚马逊前任首席科学家韦思岸如是说.全球最著名的管理咨询公司麦肯锡在一份名为<大数据,是下一轮创新.竞争和生产力的前沿>的专题研究报告中也指出:"对于企业来说,海量数据的运用将成为未来竞争和增长的基础." 随着IT技术的迅猛发展,商业活动更多基于精确的数据分析做出决策,而非领导层的"拍脑门"或"灵感迸发". 基于智能移动设备和移动互联网,运营付费移动调研

数据也性感—大数据时代的商业逻辑

比利比恩(Billy Beane)是美国奥克兰运动家棒球队的总经理.2002年,在竞争激烈的美国职业棒球联盟,奥克兰运动家队无论在人员和物质配备以及资金实力上都只是 "下三流"之列.然而,凭借耶鲁大学数据分析高材生--胖子彼得的帮助,比恩经过分析数据和晦涩难解的棒球统计学,找到了一批表面上看去都身怀缺点.性格怪癖,但骨子里却都拥有在棒球运动的某方面具备超强能力.被价值低估的棒球手,最终以突破传统的数据经营模式,取得骄人的比赛成绩,甚至达到了比肩实力雄厚的纽约扬基队的程度! 这一真实案例

大数据时代传统报业如何占位?

数据再"大"无用武之地等于零,要搜集"慢数据" "活数据" 互联网上每时每刻都在产生数据,人们生活中无所不在的各种设备,比如电脑.手机.智能电器.感应器等等,都能时刻留下人的行为痕迹,实时产生数据,这些呈几何级增加的数据沉淀在网上,成为大数据.这些大数 数据再"大"无用武之地等于零,要搜集"慢数据" "活数据" 互联网上每时每刻都在产生数据,人们生活中无所不在的各种设备,比如电脑.手机.

大数据时代的商业变革

对于众多企业管理者来说,"大数据"是一个熟悉又陌生的概念.在互联网行业蒸蒸日上的时代,传统企业和互联网企业的管理者对海量的数据规模和其爆炸性的增速毫不陌生,但却对不同来源数据交叉形成的"大数据"具有巨大的潜在价值这一事实将信将疑.事实上,大数据所积蓄的附加价值不仅超乎企业管理者的想象,更将掀起一场在商业模式和决策上的管理变革. 什么是大数据 数十年来,信息产生.组织和流通方式革命性的变化,其中个人用户第一次成为信息产生和流通的主体.QQ/MSN聊天.网络购物.信用卡

「场景化」增长的践行者:探寻大数据时代的商业变革

今日世界,产品与服务的可替代性日益显著,因此,企业必须知道并深入了解用户的期望与需求,这样才能赢得关键竞争优势.大数据分析可以将所有数据源集中起来,并提供获得用户数据的简易途径,之后便可对用户数据加以评估.诸如,谷歌和亚马逊这样的成功企业正是在这方面处于领先地位.通过智能方式连接内外数据,企业可以确保产品与服务能够满足目标用户的需求. 随着更为复杂的用户需求涌现,相对于采集.储存,数据挖掘是大数据走向应用创造价值的关键,精细化数据分析将成为驱动企业业务增长的关键功能,让大数据战略释放出大红利,催

大数据时代下,需要什么样的冷存储?

智能互联网时代,数据正在以几何级的数量爆炸增长,如何存储并管理这些海量数据,是很多企业面临的一个难题.如果采用传统通用型服务器存储策略,这意味着要建设庞大的数据中心系统,导致存储成本极速攀升. 对于那些云服务提供商而言,大量不断增长的数据例如图片等都属于不经常访问,但却又无法删除的,即使客户很久不会访问这些信息,但依然不能随意删除,并且不允许停机归档,也无法实现洪峰数据控制.对于这些不常访问的"冷"数据,如果我们能把他们迁移到一个专为冷数据而设计的低成本存储层中,将能大幅降低费用. 哪

大数据时代下,需要什么样的冷存储?

 智能互联网时代,数据正在以几何级的数量爆炸增长,如何存储并管理这些海量数据,是很多企业面临的一个难题.如果采用传统通用型服务器存储策略,这意味着要建设庞大的数据中心系统,导致存储成本极速攀升. 对于那些云服务提供商而言,大量不断增长的数据例如图片等都属于不经常访问,但却又无法删除的,即使客户很久不会访问这些信息,但依然不能随意删除,并且不允许停机归档,也无法实现洪峰数据控制.对于这些不常访问的"冷"数据,如果我们能把他们迁移到一个专为冷数据而设计的低成本存储层中,将能大幅降低费用.