梦工厂数据中心:云和虚拟化不到20%

看过梦工厂各个工作室所生产的电脑特效画面,你可能会以为他们的数据中心应该是云数据中心、全虚拟化的、扁平架构的,而且带固态存储(SSD)的。如果你真这么想,那就错了一大半。

梦工厂动画部基础设施运营全球总监Mike Cutler称,梦工厂的服务器只有约15%虚拟化了,所生产的电脑动画渲染工作中只有约20%是利用云服务完成的,而且梦工厂目前还没有发现对SSD有什么需求。

梦工厂数据中心的存储容量为3.8PB,拥有4000台服务器,25000颗CPU。工作区还为员工提供免费食品和医疗保健服务。

加州雷德伍德市梦工厂工作室外观

虽然梦工厂的服务器没有使用大量的hypervisor技术,但在最先进的刀片服务器、存储阵列和网络上却投入了巨资,以确保艺术家们能够满意和高效率地工作。

梦工厂负责企业营销的Kate Swanborg称,“我们这里投入最大的就是技术,因为我们必须保证艺术家和工程师们能够心情愉快地在这里工作。他们每天都泡在这里,如果你不能提供最先进的技术,他们就会另谋高就。”

梦工厂在美国有两间工作室,在班加罗尔有一间,每年要生产3部电影,而每部电影的制作周期差不多需要3年。梦工厂差不多任何时间段都会有8到10部影片在制作过程中。而据Swanborg说,随着每部影片的上映,观众们对电脑特效画面的质量要求也水涨船高。

在制作一部3D影片时,所投入的计算能力和存储容量是十分庞大的。大约需要300多台高端工作站同时工作。一部影片的渲染工作需要同时使用17000个处理器核心,超过6000万小时。

每个动画人物需要多达2000个控制点或功能才能被动画师完全操控。每个人物需要花6个月时间来制作。“每部影片中的每个像素都是可控的,”Swanborg说。而一部成片中的像素超过了2500亿。

摆在梦工厂员工免费自助餐厅门外的《功夫熊猫》中阿波的雕像。

每秒24帧,每部影片12万帧,仅一部影片就会产生5亿个数据文件,需要占用200TB的存储量。“这个容量和生产一架波音飞机是一样的,”Swanborg说。

每天在工作室的服务器上要执行大约40万个处理进程。梦工厂采用红帽的Enterprise MRG来调度这些进程和进程消息。“大多数进程是并行执行的,”Cutler说。

参与影片生产实际制作过程的人员不包括开发人员,梦工厂有150位软件工程师保障各种应用的平滑运行,梦工厂雷德伍德市工作室的研发总监Jeff Wike说。Wike说,梦工厂的软件工程师有大约20%的人都有博士学位,他本人就是放弃了在航天工业的一份“很有前途的工作”来到这里的。

“每3个月就会有一部电影发表,每部电影都是完全不同的。所以这里的所有事情都是新鲜的,”Wike说。

在过去3年里,梦工厂的软件工程师们实现了软件的并行化,充分发挥了英特尔最新的16核Sandy Bridge处理器的优势。

“我们自己不会去开发所有的软件,但大部分是我们自己开发的。能买的我们就买,必须自己开发的就自己开发,”Wike说。“我们的优势就是有一位非常非常喜欢技术、但却根本不懂技术的CEO在推着我们走。这很了不起,他不知道什么是困难的,什么是不可能的。他只说我们应该有工具可以做这样的事情。然后我们就抓耳挠腮地说,‘好吧,我们应该可以做到。’”

一部成片的工作量十分惊人,成本当然也令人乍舌。以《怪物史莱克4》为例,这部90分钟的动画片,制作成本约为1.3亿美元,然后还需要额外的1.3亿美元和1.5亿美元用于发行和市场营销。

虽然最终的成片是电脑制作的,但是创造一部动画片依然需要人工绘制。梦工厂的每部影片都有故事板,每个场景都需要艺术家手工绘制。每部影片需要大约7万到10万个故事板。

惠普3Par存储机柜

梦工厂的大部分IT基础设施统一采用了惠普的BladeSystem c-Class服务器刀片,约有3000块,每块刀片都预配置好了计算、存储和网络架构。梦工厂还使用了惠普的NAS和3Par存储阵列。唯一的例外是使用了少量的HDS的存储阵列和NetApp的NAS。

梦工厂工作室的服务器机柜都配备了通风“烟囱”,可以把热空气向上排出室外。“冷热气流从不混合,”Cutler说。“所以也不需要冷却系统。”

一排惠普刀片服务器机柜。服务器散发的热气排进一个封闭的烟囱里,因此不再需要额外的空调设备。

2009年,在影片《怪兽大战外星人》中首次使用了3D成像技术,电脑制作一直在不断地推升着梦工厂的技术需求。3D电影需要额外增加100TB存储量,因为很多画面都得加倍。

年底的假期档,米高梅公司发行的《霍比特人》将是首部采用每秒48帧技术制作的电影。

“如果观众认可这种体验,那将会对存储和渲染带来巨大的影响,”Wike说。

时间: 2024-08-01 16:38:41

梦工厂数据中心:云和虚拟化不到20%的相关文章

数据中心存储虚拟化五大注意事项

  服务器很受关注,但是成功的虚拟化部署有赖于存储.存储可以保护虚拟机的状态.保留快照和帮助用户访问共享应用程序中的数据.由于这些特性.可用性和性能因素,我们对于存储基础设施提出了很高的需求.所以管理员应该了解最关键的数据中心存储虚拟化注意事项. 数据中心存储虚拟化注意事项之一 :存储性能 现在,管理员可以从多个不同的存储平台中进行选择,比如iSCSI.光纤通道.网络附加存储和以太网光纤通道.所有这些平台都可以适用于虚拟环境,但是会提供完全不同的可扩展性.性能表现.可用性和容量特性. 存储性能通

数据中心网络虚拟化技术概要

随着云计算和大数据等新兴应用的快速发展,"数据中心即计算机"(data center as a computer)的技术发展趋势逐渐明朗.数据中心作为一台计算机,与传统的高性能计算机具有很大的不同.在高性能计算领域,因为服务器被独占式的分配给租户使用,所以其主要的优化目标是"算得快".但是在云计算领域,为了提高数据中心的利用率.降低其运营成本,服务器整合(server consolidation)技术将成为常态.此时,服务器内将同时运行不同租户.不同应用的实例.一般

浅析数据中心网络设备虚拟化技术-802.1BR

如今,数据中心网络设备如何进行虚拟化被广泛关注与讨论,这是一种提升网络管理效率的有效方式.网络设备的虚拟化不同于网络虚拟化技术,强调的是网络设备之间的融合,将所有的网络设备虚拟化成一台设备,统一对所有网络设备集中式管理,这样大大提升了网络的使用率和管理效率,802.1BR就是这样的一种虚拟化技术.一般的网络设备虚拟化往往是将同种类型的网络设备虚拟化为一台设备,比如网络核心层.汇聚层以及接入层某一层的设备,有些技术也可以实现不同网络层级的设备虚拟化,但往往对网络设备数量有限制,而且这种虚拟化是强耦

《通信技术导论(原书第5版)》——2.2 下一代数据中心:虚拟化和千兆比特速率

2.2 下一代数据中心:虚拟化和千兆比特速率 数据中心存放企业的数据和语音电话包括电子邮件和会计等应用程序.大多数的数据中心专门配备冷却.火灾报警.安全进入和备用电源.公营及私营机构.云设施和运营商网络均设有自己的数据中心. 下一代数据中心支持: 设备间千兆比特速率通信. 虚拟化减少了存储文件和运行应用程序的物理服务器的数量.2.2.1 数据中心的私有云 企业和商业机构对于将数据中心的功能移至云端持谨慎态度.正如第1章详细介绍,安全性.可移植性和数据控制权的丢失是它们担心的主要原因.但是IT主管

云计算数据中心网络虚拟化技术

云计算数据中心网络虚拟化技术 李明 云计算带来的超大规模数据中心建设,对数据中心网络提出了新的需求,网络虚拟化技术是解决这些新需求的有效手段,本文通过系统论述数据中心网络虚拟化技术中涉及的控制平面虚拟化技术和数据平面虚拟化技术,分析了业界主要厂商的技术实现和新的虚拟化标准协议的技术原理,为数据中心网络虚拟化技术的发展提出了一个较为清晰的演进路径. 关键词: 云计算 数据中心 网络虚拟化技术   [下载地址]:http://bbs.chinacloud.cn/showtopic-13551.asp

数据中心服务器虚拟化技术介绍

提到数据中心里的虚拟化技术,当属服务器的虚拟化最为久远.服务器虚拟化技术是将传统的物理主机通过虚拟化软件,将物理主机的CPU.内存和硬盘存储空间整合成统一的逻辑资源池,再从逻辑资源池中创建几个几十甚至几百个虚拟服务器为应用提供服务,从而提高资源利用率,简化服务器管理.随着云计算技术的应用,服务器虚拟化得到了极大普及,虚拟化已经成为数据中心必备技术之一.实际上,虚拟化技术包含广泛,仅是服务器的虚拟化就已经发展出了很多分支.当然,不管这些技术如何发展,目的都是一样,就是尽可能地提升数据中心应用部署.

数据中心:虚拟化技术融合加速

虚拟化是新一代数据中心使用最为广泛的技术,也是其与传统数据中心的最大差异. 随着新一轮IT技术的发展,数据中心体系结构的变化,以及企业对新一代数据中心建设提出的明确要求,如业务驱动.适应性.面向服务.绿色.安全等,使得标准化.简易化.模块化.集成化成为规划新一代数据中心的依据.而建设新一代数据中心的关键环节是如何利用虚拟化技术实现基础设施虚拟化并整合数据中心的基础设施. 在新一代数据中心,通过服务器虚拟化.网络虚拟化.应用虚拟化等解决方案,不仅可以帮助企业或机构减少服务器数量.优化资源利用率.简

数据中心网络虚拟化技术之NFV

NFV这个词语如今在各大媒体上出现的次数越来越频繁,很多人可能还不知道NFV是什么东东,本文就来给大家恶补一下,NFV是Network Functions Virtualisation的缩写,中文名叫网络功能虚拟化,这是由网络运营商联盟提出的,ETSI(欧洲电信标准协会)组织的NFV规范基础是标准范本.NFV旨在利用标准IT虚拟化技术解决这些问题,具体是把多种网络设备类型融合到数据中心.网络节点和终端用户企业内可定位的行业标准高容量服务器.交换机和存储中.通过使用X86等通用型硬件以及虚拟化技术

数据中心已经虚拟化了 数据库还会远么?

从传统角度看,企业需要针对包括测试.报告与开发等不同用途保存数据库副本.然而这类额外数据库副本会占用并蚕食宝贵的存储资源,这在IT部门预算与时间双双紧缺的背景下给技术人员带来不少麻烦. 桌面系统与服务器的虚拟化方案在企业领域已经非常普遍,但数据管理专家Delphix则希望更进一步,推动数据库虚拟化的全面铺开. 从传统角度看,企业需要针对包括测试.报告与开发等不同用途保存数据库副本.然而这类额外数据库副本会占用并蚕食宝贵的存储资源,这在IT部门预算与时间双双紧缺的背景下给技术人员带来不少麻烦. "