数据库也要“瘦身”,你知道吗?

工业4.0时代,如何应对信息的爆炸式增长?在财务、物料、人力等ERP数据指数增长的背后,形形色色的系统、林林总总的需求同时也导致许多功能模块运行缓慢、响应时间滞后。

这就需要企业为业务提供越来越大的高性能磁盘容量。但即便这样,数据库性能依旧日渐变差。为了向企业提供稳定的数据库性能,并满足长期保存和访问要求,对数据库性能的优化才是当务之急。

面对集团总部、下属企业及业务部门的多个业务流程,大唐华银选择未雨绸缪,保障了应用的持续高效、稳定运行,并实现了企业效益的最大化。那么,它究竟是如何打破数据库瓶颈的呢?现在就一起来看看吧。

数据库在5—10年内,如何持续保持最佳水平

大唐华银电力股份有限公司是实施电力核心产业向电力相关产业、电力延伸产业、高新技术产业和风险投资等多元发展的战略主体。2007年,大唐集团从大唐华银先试先行,以Oracle EBS平台为基础,构建了以设备管理为源头,物资管理、燃料管理为中枢,财务管理为归集点的一套电力企业管理系统。2008年,核心业务一体化平台正式上线运行,并逐渐推广到集团下属的其它分支机构。这一具有“大唐”特色的解决方案,有效的满足了集团化发电企业的管理需求。

然而,为保证未来5-10年内生产数据库大小保持在最佳水平,避免数据库服务器和高端存储的扩容,并节省数据库调优的支出和系统维护成本,提高投资回报率。大唐集团希望寻找一个可靠的数据库归档解决方案,对部分大表进行归档迁移,并且在归档的同时进行系统优化,通过缩短系统的应用响应、备份和恢复的时间,改进系统的可管理性,降低不断对数据库调优的管理开销,为其EBS系统提供高效的数据增长管理。

专为Oracle EBS打造的数据归档软件HPE SDM

在选择归档优化方案供应商时,大唐集团重点考虑的是慧与。据负责项目实施的大唐华银安全生产部副主任兼信息管理办主任刘文哲先生介绍,他们考查和测试了业界知名的数据归档产品,并且也曾动念自己开发流程产品,但最后发觉HPE SDM是最适合的,这款产品可谓是专门为Oracle EBS打造的,对应Oracle主要业务应用,具备完整的、可立即运行的档案模块,每一个模块都经过预策划、测试,符合Oracle业务规则及流程,支持数据和应用的集成。

大唐集团能够利用HPE SDM,通过将不活跃的数据搬迁到另外一个历史但在线的数据库中,对不断的膨胀性数据增长进行有效地管理,实时反应集团各企业的生产经营情况以及遇到的挑战与压力,为决策层提供有价值的数据与信息。

在项目正式实施之前,慧与技术服务专家进行了细致的需求调研、访谈工作,对系统现有架构、模块、数据量、性能及验证环境搭建都进行了实地调查,发现部分业务运行已经比较慢,财务凭证制证后的过帐时间长,利润明细表运算也非常慢。更为重要的是,客户未来还要上线多个单位、多个业务,更加担心速度问题。

而这些也是刘文哲主任所关注的重点,他认为此次实施归档优化方案,一方面是进行系统性能优化,对数据库进行瘦身;另一方面性能极限必须满足未来5至10年的发展,不用频繁升级服务器和存储等基础设施,作到未雨绸缪!

根据大唐集团的Oracle EBS应用环境,大唐华银利用慧与数据库归档软件,对其实施了单实例(SI)的活归档方案。在这个方案中,不用另外增加数据库服务器,生产数据和历史数据存在同一个高性能的HPE Integrity Superdome 2高端动能服务器中,但分属不同的表空间,逻辑层分布数据以提高数据整体性能,并方便存储管理。另外,使用这种方案,归档过程相对简单,并能根据需要设置不同权限,进行重新配置访问历史资料,而性能却不会下降。

HPE SDM提供了EBS标准模块的大表归档模型,拥有可视模块环境,财务、物料、系统管理等模块在出厂时即定制好,标准模型可直接导入。同时,大唐集团还有许多自己开发的报表、商务智能等系统,这些自定义部分都需要进行二次开发。HPE SDM支持Designer,这一快速建立新档案模块的强大工具让用户只需在架构浏览器中找到表格并将其拖拽到Designer界面中,即可自定义表格。

数据库性能提升,归档优化方案成各工厂标配

在实施了慧与数据库归档方案后,大唐集团大大减小了其Oracle EBS系统的总体数据库规模。方案通过把不活跃的数据搬迁,从而大大节省了关键数据所占用的空间,有效提高了系统的性能,减轻了相关的管理和维护烦恼。

说到方案实施的好处,刘文哲主任认为:HPE SDM具备全面的数据归档功能,能够将生产数据库中的数据迁移到一个独立、在线的数据库以实现快速、透明的访问,有效管理数据库增长,大大提高了核心业务一体化平台的整体访问效率,使系统在大并发用户情况下仍能保持高效运行。具体来说:

  • 数据库到数据库归档,实现更快的数据访问并降低成本;
  • 完整范围访问能力满足业务运营、合规和审计要求;
  • 可视化设计工具,支持自定义和内部应用;
  • 强大的扩展性能可处理最大、最复杂的数据库应用;

正如建设核心业务一体化平台时遵循的基本原则:只做核心业务,不搞贪大求全,此次数据归档优化方案的实施也不是“大而全”,大唐集团在评估EBS各模块中哪些表单需要做归档时也是有所选择的,他们确定数据量达到1000万级以上为第一批归档对象,今后随着业务发展,会根据数据增长量和频繁使用度作为衡量标准,达到标准才会进行归档,而这一分辨工作会由一个包括业务、技术人员在内的专门团队负责。

截至目前,采用慧与方案的数据归档系统已经在大唐集团下属湖北、河北、河南、吉林等众多分公司成功运转了数月至几年,其高效的性能优化能力得到了客户的一致认同。现在,这套方案已经被推荐为大唐集团旗下二级单位的核心业务一体化平台数据归档处理的标准方案。

本文作者:HPE大数据

来源:51CTO

时间: 2024-09-20 07:50:58

数据库也要“瘦身”,你知道吗?的相关文章

【数据蒋堂】第15期:开放的计算能力为数据库瘦身

[数据蒋堂]第14期:计算封闭性导致臃肿的数据库 我们在上一期谈到,数据库的臃肿,也就是过多的中间表以及相关存储过程,是由于其计算封闭性造成的.如果能够实现独立的计算引擎,使计算不再依赖于数据库提供,那么就可以为数据库瘦身了. 内部来源的中间数据不必再以数据表的形式落地在数据库中,而可以放到文件系统中,由外部计算引擎提供进一步的计算能力.对于只读的中间数据,使用文件存储时不需要考虑再改写,可以更为紧致并采用一定的压缩手段,而且在访问时也不必考虑事务一致性,机制大为简化,这样能获得比数据库更好多的

网站建设与优化 “瘦身”之后更受青睐

由于行业特殊性,对中小企业网站建设及网站制作等特别关注,也经常分析中小企业的网站.实事求是的说,很多公司网站建设的真的不敢恭维.且莫说页面设计的是否精美,是否粗制滥造,单单就是网站打开速度,已经让人无法忍耐.这里面自然有服务器运行质量的因素,但是更多的是程序编写不合理,或者网站设计本身应用了太多的高精度图片和动画导致.加载速度慢的网站,不仅影响了用户的体验感受,也会给搜索蜘蛛检索爬行网页带来障碍. 从用户体验和优化的角度,网站"瘦身"原因和目的有二.一是基于用户体验,简洁干净代码规范的

基于WebSphere Commerce的电子商务应用性能优化(3) 网络流量瘦身建议

网络流量瘦身建议 浏览器端用户所感受到的响应时间受很多因素影响,最主要的来的三个方面: 服务器端的内容生成时间,受服务器端硬件计算能力和服务器的应用程序性能影响 网络上传输数据的时间,受网络带宽和所传输数据的大小影响 客户端渲染时间,受客户端浏览器性能和客户端程序性能影响 服务器端和客户端的性能我们在本系列文章的其他部分中有讨论.本部分着重讨论如何减少网络传输时间 .用户与服务器的交互不可避免要在网络上传输数据.尤其是近年来 WEB2.0 等技术的采用,越来越多的交互 和渲染工作转移到浏览器端进

致Android开发者:APP 瘦身经验总结

随着移动端产品功能的逐渐增加,APP 的体积也不可避免地呈现上升趋势,如果不加以重视,几个版本迭代下来,可能你的 APP 体积会达到用户不能忍受的程度. 如果你是 SDK 开发者,你的 SDK 包大小是用户决定是否采用的关键因素:如果你的APP 想要预装到某款手机或者某款 Android 系统中,APP 的体积也会受到很严格的限制. 因此,APP 的瘦身是每个移动端产品都会遇到的一个普遍问题,本文选自<Android高级进阶>将从不同的角度切入,全面介绍APP 瘦身相关知识. APP 为什么变

MySQL的InnoDB扩容及ibdata1文件瘦身方案完全解析_Mysql

mysql的innodb扩容为了添加一个数据文件到表空间中,首先要关闭 MySQL 数据库,编辑 my.cnf 文件,确认innodb ibdata文件的实际情况和my.cnf的配置是否一致,这里有两种情况: 1.my.cnf的配置 innodb_data_file_path=ibdata1:10G;ibdata2:10G:autoextend 如果当前数据库正在使用ibdata1,或者使用ibdata2,但ibdata2没有超过10G,则对my.cnf配置直接改成: innodb_data_f

Visual Studio 2010 瘦身精简方法

问题描述 VisualStudio2010(简称VS2010)出来已经有几个月了,虽然安装程序比Vs2008小了一些只有2.5G,但仍然是一个庞然大物,继续秉承微软的一灌作风"捆绑",不管用上用不上先给你绑上.全完安装需要7-8G空间,自定议安装的话,可以定制的内容也不多.可选安装包如下:1.VisualVB.net2.VisualC++3.VisualC#4.VisualF#5.VisualWebDeveloper6.图形库7.Dotfuscator软件服务8.MicrosoftSQ

压缩技术给SQL Server备份文件瘦身_MsSql

可是,其体积仍然很庞大.所以,在日常工作中,如何给SQL Server的备份文件瘦身,就是很多数据库管理员所关心的问题了. 也许微软的数据库产品设计专家听到了众多数据库管理员的呼声了吧.在最新的2008版本的SQLServer数据库中,提出了备份压缩的概念.其基本原理跟利用RAR等压缩工具压缩文件一样,可以让原有的备份文件体积更小.这直接带来的好处,就是可以节省服务器的备份空间.另外,若SQLServer数据库配置了异地备份的话,那么也可以节省网络带宽,缩短异地备份的时间,等等. 笔者前不久刚把

瘦身网站薄荷网探寻盈利模式从给收费瘦身开始

每小时至少花费200元,并且要被折腾得汗流浃背,在很多中国消费者眼里健身房的私教课程就是这么不合情理.不过,如果收费少那么一点,他们还是很愿意获得正确的健身方法的. 这就是瘦身网站"薄荷网"的盈利模式. 创办者马海华因此也转换了身份.之前,他是平安资产管理有限责任公司负责境外投资的投资经理.如今他不再是投资生意中那个评价别人盈利模式.拍板掏钱的人.他正在为自己的公司筹备第一轮融资. 三年前面对搜狐董事黄沁和另外三位投资人,薄荷网总经理马海华只筹到40万起步资金,他和另一位合作伙伴自掏1

瘦身网站薄荷网缩减业务盈亏平衡

在给会员提供瘦身方案的同时,薄荷网通过缩减自己的业务,找到了合适的盈利方式,不过,如果"山寨"来了怎么办? 文|CBN记者 赵慧 每小时至少花费200元,并且要被折腾得汗流浃背,在很多中国消费者眼里健身房的私教课程就是这么不合情理.不过,如果收费少那么一点,他们还是很愿意获得正确的健身方法的. 这就是瘦身网站"薄荷网"的盈利模式. 创办者马海华因此也转换了身份.之前,他是平安资产管理有限责任公司负责境外投资的投资经理.如今他不再是投资生意中那个评价别人盈利模式.拍板