“放得下”和“取得出” 广电总局海量数据解决方案解析

国家广电总局监管中心肩负着对全国电视节目、互联网等信息网络视听节目、新媒体视听节目播出内容以及全国无线广播节目的监听监看的重任,监听监看任务涉及业务系统数目较多,数据量大,数据统一管理困难,如何整合这些业务系统实现数据存储、管理、共享一直都是监管行业的技术难题。如何破局,不仅关系着解决广电总局大数据存储管理的困扰,更将势必会引起广电行业新的技术革命。

如今这一难题已经被浪潮海量存储解决方案化解。广电总局监管中心的海量数据实现了“放得下”和“取得出”。

“放得下”和“取得出”

国家广播电影电视总局监管中心,拥有广播电视监测中心、收听收看中心、安全播出调度中心、信息网络视听节目监管中心和中视卫星公司5个单位,同时下设全国15个广播监测台,是我国宣传事业的“千里眼、顺风耳”。全国电视节目、互联网等信息网络视听节目、新媒体视听节目播出内容以及全国无线广播节目,全靠其监听监看。

随着机构的整合,卫星电视、网络视听节目和新媒体业务的不断发展,所需的存储系统规模巨大。

大容量是对存储的第一要求,“放得下”是最基本的。

以 IPTV播控平台为例,向下对接各个试点地区集成播控分平台,分发内容、产品、增值业务、EPG信息等,存储系统用于承担接收、存储内容平台提供的内容,并收集试点地区集成播控分平台的运营数据,现在仅仅实现了10个左右播控平台的直播码流录制和点播节目下载内容的数据存储量就达500TB,数据访问带宽达1GB;而后来,广电总局监管中心将2个直辖市、22个省会城市在内的42个城市也将纳入到监管范围之内,如此之大的监管量,自然需要一套处理能力强、数据存储容量大的系统作为支撑。这个“放得下”并不是简单的容量叠加,而是要能真正实现数据的共享,统一的命名空间。

“取得出”是广电总局对存储的另一个基本要求。

随着三网融合进程不断的推进,广电行业经营的业务从传统的有线电视、卫星电视、无线广播这类传统业务开始向互联网电视、IP电视、新媒体等新兴业务发展。数字电视进入到千家万户,节目的质量越来越清晰,这些都使得电视台电视节目数据量成PB级增长的同时,如何取出这些节目、如何高效的进行节目检索与分析等一系列问题接踵而来,成为制约电视节目数字化的“绊脚石”。

用广电总局监管中心张处长的话说,“我们以前50年产生的数据量都赶不上三网融合以来产生的数据量大,怎么存储、怎么管理这些数据是我们未来很长一般时间要思考的事情”。

因此,将媒体内容作为一种资本来进行管理、挖掘和再利用的要求逐渐迫切,实现媒资系统的分级存储、高速检索,建立高效、安全的存储系统势在必行。

图:浪潮海量存储系统

PB级存储,让数据“放得下,取得出”

各省市电视台、总局批准的七大播控平台以及地方新媒体电视运营商相互独立,又遍布全国各地,要实现紧急状态下对全国广播电视传输覆盖网的运行管理、资源调配和应急指挥工作,必须要打破信息孤岛的壁垒,实现所有业务数据的共享,统一管理,这需要具备“海纳百川”精神的兼容性高的存储设备来担纲。

为此,浪潮为广电总局监管中心提供了海量存储解决方案,主要承担广电广播监测系统、新媒体系统、资源共享系统、信息平台业务系统、卫星电视数据系统、收听收看等业务系统的数据存储任务。

首先解决“放得下”

广电总局监管中心的海量存储方案由在线存储系统、数据库系统、备份系统三大部分组成,在最关键的“生产系统”选择上,采用了浪潮AS10000。

AS10000最大支持64PB海量级的存储数据,64PB的数据管理规模,可以“放得下”广电总局所有业务系统1-2年的音频视频数据,这也就意味着监管中心“怎么存储”的这一难题可以轻松搞定。

然而,对于浪潮AS10000来讲,大容量只是小CASE,它更华丽丽的一个特点,则是它强大的整合能力。

AS10000同时支持NAS、IPSAN及FCSAN功能,融合iSCSI、FC、Infiniband及10Gb万兆主机接口,囊括了目前主流的存储网络架构及主机连接方式。它将广电总局目前的存储网络架构进行高效、合理整合,统一部署和集中管理,真正实现了数据的共享,统一的命名空间,从而更好地服务于广播电视事业。

其次必须“取得出”

对于张处长所提到的“怎么管理”即“取得出”这一问题,浪潮海量存储解决方案也不在话下。

随着我国有线电视数字化工作的全面推广,高清数字电视正在逐步普及,高清数字电视节目制作采用非线性编辑方式,这种方式下不同类型的业务对于数据读写的带宽需求有极大的差异,当前无压缩高清视频码率达100MB/s以上,经常使用的高清压缩码率也在100-300Mb/s之间,而标清视频已经达到50Mbps或25Mbps,每个文件的正常请求时间几分钟到几个小时不等,随着音频视频质量的提高以及并发访问,存储设备就要提供更高的传输码流和访问速度。

浪潮海量存储解决方案采用独有的高性能集群架构设计,可提供极高的带宽,其性能、容量随节点数量增加而线性增加,带宽最高达到64GB/S的速度,这堪称存储系统的“高速路”。可支持数千并发访问,满足了音频视频质量的提高以及并发访问的需求,从而为广电总局监管中心提供了更高的传输码流和访问速度。

迎来效率的提升、监管的加强

伴随着数据“放得下、取得出”这一难题的顺利攻破,广电总局迎来的是效率的提升、监管的加强。

曾经,各省市电视台、总局批准的七大播控平台以及地方新媒体电视运营商各自为政,又遍布全国各地,原来这些复杂的音频视频数据都在各自平台上进行存储一段时间,会删除部分数据,重要的才会迁移到广电总局的系统中来。这种存储模式造成了种种的不便——广电总局在紧急状态下数据管理、资源调配时候,常常陷入要么数据已删除、要么需要长时间的调取的窘境。

如今,广电海量存储解决方案只有“一个中心”,所有的数据都围绕着这“一个中心”进行存储,打破了信息孤岛,实现了多业务之间数据共享,提高了数据存储、管理安全性,满足了广电监管行业未来数据PB级增长的需求。如果需要对音视频数据进行查询检索及监管,无需千里迢迢地索要数据,动动鼠标,即可搞定,在64GB/S的高速带宽的支持下,流畅而轻松,效率大大提升。

而且,兼容并包的海量存储解决方案,多种格式介质并存,解决了经常要转换格式而导致质量下降、效率低下,音视频数据查询检索、上载、下载、审核、编目整体系统速度慢的问题。

随着三网融合与数字化电视高清化的进程,海量存储必将开启广电行业数据存储的新时代。

时间: 2024-10-26 04:25:49

“放得下”和“取得出” 广电总局海量数据解决方案解析的相关文章

男人的艺术,要拿得起,更要放得下

问题描述 这篇文章,我想和大家分享一些我学习生涯中的一些体会,其中一项,就是技术要拿得起,更要放得下. 回想数年前,我也曾经在C++虚拟继承类的objectmemorylayout研究过程中激动过.也为了实践不同的COMApartmentModel写过多种测试程序.当然,也为了到底是学Java还是.NET踌躇过.也在论坛上为了牛角尖问题和人家打过口水仗,也拿自己用汇编写的程序炫耀过.也怀疑过算法到底对实际工作有多大帮助,也沉迷于论坛上回答问题赚的专家分. 学习的路上也吃了不少亏.曾经花了几百大洋

一个很大A仓库和B仓库中有许多放置货的地点(区),如果相同的一批货,一个区放不下,需要放在邻近的区 ,同时一个区也有可能放多种货物。

问题描述 一个很大A仓库和B仓库中有许多放置货的地点(区),如果相同的一批货,一个区放不下,需要放在邻近的区,同时一个区也有可能放多种货物.如A仓库一区至四区放a货物,A-1对a A仓库九区放c.b货物,A-9对c,b A仓库五区至八区放b货物,A-5/6/7/8对b A仓库十区放d货物A-10对b B仓库同理........这是多对多的关系如何对这些货物标识一个唯一的放货地点呢?数据库表怎么设计????我举个例,A仓库很大,为了管理,分了1-50区当然,货也很大,如大的集装箱,占了很多的区,如

101L冷冻室放得下150斤肉网友赞匀冷冰箱“太能装”

"两门冰箱的冷冻室竟然塞下150斤猪肉!"近日,市民林先生在新浪微博上发布了这样一条消息,引起了 网友们的关注.但也有不少网友提出疑问,两门冰箱的空间并不大,加上抽屉.隔板之后,更制约了储存空间,不可能放得下这么多猪肉.记者联系林先生了解到,上周末他回了趟老家,买回来150多斤散养猪肉,买回家之后才发现没地方放.和家人一商量,就开始捣腾家里上个月刚买的海尔匀冷冰箱."散养猪比圈养猪的肉要紧实,肉质和口感都更好,没想到一下就买多了.上个月刚买的这台冰箱,也没想到能放下这么多肉,

解决win7系统下安全弹出U盘出现电脑重启的问题方法

  U盘是一种能够方便用户便携式存储数据的设备,U盘在我们的生活中较为广泛被使用,不过有些用户在win7系统下使用U盘时进行备份或转移资料后,在不使用U盘时,使用安全弹出U盘时出现电脑自动重启的问题,对于该奇葩问题很多用户表示不解,故此小编针对遇到该问题的用户提供了解决方法,需要的用户赶快试试吧! 解决win7系统下安全弹出U盘出现电脑重启的问题方法 1.返回到桌面位置,找到"这台电脑"图标,直接鼠标右键点击这台电脑,在出现的菜单里面选中选择设备管理器选项. 2.这样就能够打开win8

浏览器 office2010-安装了office2010后,关于日期的下拉菜单出问题了!

问题描述 安装了office2010后,关于日期的下拉菜单出问题了! 把office更新为office2010后,在使用IE内核的浏览器登陆"商务部二手车交易市场"管理系统中,在点开一个表单填写日期的过程中发现了一个问题,那是一个日期下拉菜单,点开"年"的下拉菜单可以选择,但是在点开"月""日"的下拉菜单时却出现错误,没法显示下拉菜单,经观察所有装有office2010的电脑都有这种现象出现,而2007版本则没有这样的问题,或

如何通过PowerShell获取Site Collection下被签出的文件

由于权限的设置,当文件被签出时导致别人不可见了,这对校验文件个数的人来说着实是件烦恼的事.幸好利用PowerShell,可以获取Site Collection下被签出的文件. Resolution Add-PSSnapin Microsoft.SharePoint.PowerShell function GetAllCheckOutFiles([string]$siteUrl){ $spSite=Get-SPSite $siteUrl $spSite.AllWebs|%{ $_.Lists|wh

WinXP下光纤拨号出问题的原因及解决方法

  现在大多数家庭都使用光纤接入式宽带,这种宽带速度比传统的网络连接速度更快,也更稳定.由于不少朋友刚接触这种宽带,在使用过程中常常会出现一些问题,比如在WinXP下安装FTTB拨号程序出现了如下故障: 故障原因: 在Windows XP中按照在Windows 98下的操作步骤,安装FTTB专用拨号程序后输入用户名和密码,系统要求重启.重启系统后双击拨号程序,奇怪的是它要求笔者再次建立新的连接,而以往在Windows 98下,就可直接拨号上网了.再次建立一个连接,仍然如此. 故障分析: 由于在安

win8系统下如何在不安全删除硬件的情况下安全拔出U盘?

  现在大家对于U盘的使用率越来越高了,里面存放了很多重要的文件,所以对于U盘的保护也是至关重要的,我们在使用完拔去U盘的时候要注意了,切勿直接拔掉U盘,对U盘的稳定性造成影响,会使电脑中的文件不安全.一般人想要拔掉U盘的时候大多都是右键点击USB设备,然后删除硬件就可以了,这样的方法的确可以安全退出电脑,但是在设置方法上还是极不方便的,今天小编为大家介绍的方法可以在win8系统中实现不删除硬件就能安全拔取U盘,一起跟随小编来看看吧! 在不安全删除硬件的情况下安全拔出U盘的操作方法 1.首先,我

win7系统下右下角弹出Awc.exe 损坏文件警告该怎么办?

  win7系统下右下角弹出Awc.exe 损坏文件警告该怎么办?有用户发现win7系统桌面右下角出现"Awc.exe -损坏文件",大家对这个提示符很陌生,其实它的另一种表现形式是在屏幕的右下角出现黄色感叹号的错误提示窗口.如果遇到"Awc.exe -损坏文件"提示怎么办呢?现在小编告诉大家解决方法. 1.首先同时按下键盘上的win+R 快捷键打开电脑的运行窗口,在打开的运行窗口中输入cmd 并单击回车,这样就可以打开命令提示符窗口了. 2.在打开的命令提示符窗口