揭秘梦工厂的数据中心 新技术需求不旺盛绿色数据中心

2012-10-23    来源:腾讯科技    编辑:陆琬
看过梦工厂各个工作室所生产的电脑特效画面,你可能会以为他们的数据中心应该是云数据中心、全虚拟化的、扁平架构的,而且带固态存储(SSD)的。如果你真这么想,那就错了一大半。
看过梦工厂各个工作室所生产的电脑特效画面,你可能会以为他们的数据中心应该是云数据中心、全虚拟化的、扁平架构的,而且带固态存储(SSD)的。如果你真这么想,那就错了一大半。

  梦工厂动画部基础设施运营全球总监Mike Cutler称,梦工厂的服务器只有约15%虚拟化了,所生产的电脑动画渲染工作中只有约20%是利用云服务完成的,而且梦工厂目前还没有发现对SSD有什么需求。

  梦工厂数据中心的存储容量为3.8PB,拥有4000台服务器,25000颗CPU。工作区还为员工提供免费食品和医疗保健服务。

  虽然梦工厂的服务器没有使用大量的hypervisor技术,但在最先进的刀片服务器、存储阵列和网络上却投入了巨资,以确保艺术家们能够满意和高效率地工作。

  梦工厂负责企业营销的Kate Swanborg称,“我们这里投入最大的就是技术,因为我们必须保证艺术家和工程师们能够心情愉快地在这里工作。他们每天都泡在这里,如果你不能提供最先进的技术,他们就会另谋高就。”

  梦工厂在美国有两间工作室,在班加罗尔有一间,每年要生产3部电影,而每部电影的制作周期差不多需要3年。梦工厂差不多任何时间段都会有8到10部影片在制作过程中。而据Swanborg说,随着每部影片的上映,观众们对电脑特效画面的质量要求也水涨船高。

  在制作一部3D影片时,所投入的计算能力和存储容量是十分庞大的。大约需要300多台高端工作站同时工作。一部影片的渲染工作需要同时使用17000个处理器核心,超过6000万小时。

  每个动画人物需要多达2000个控制点或功能才能被动画师完全操控。每个人物需要花6个月时间来制作。“每部影片中的每个像素都是可控的,”Swanborg说。而一部成片中的像素超过了2500亿。

  每秒24帧,每部影片12万帧,仅一部影片就会产生5亿个数据文件,需要占用200TB的存储量。“这个容量和生产一架波音飞机是一样的,”Swanborg说。

  每天在工作室的服务器上要执行大约40万个处理进程。梦工厂采用红帽的Enterprise MRG来调度这些进程和进程消息。“大多数进程是并行执行的,”Cutler说。

  参与影片生产实际制作过程的人员不包括开发人员,梦工厂有150位软件工程师保障各种应用的平滑运行,梦工厂雷德伍德市工作室的研发总监Jeff Wike说。Wike说,梦工厂的软件工程师有大约20%的人都有博士学位,他本人就是放弃了在航天工业的一份“很有前途的工作”来到这里的。

  “每3个月就会有一部电影发表,每部电影都是完全不同的。所以这里的所有事情都是新鲜的,”Wike说。

  在过去3年里,梦工厂的软件工程师们实现了软件的并行化,充分发挥了英特尔最新的16核Sandy Bridge处理器的优势。

  “我们自己不会去开发所有的软件,但大部分是我们自己开发的。能买的我们就买,必须自己开发的就自己开发,”Wike说。“我们的优势就是有一位非常非常喜欢技术、但却根本不懂技术的CEO在推着我们走。这很了不起,他不知道什么是困难的,什么是不可能的。他只说我们应该有工具可以做这样的事情。然后我们就抓耳挠腮地说,‘好吧,我们应该可以做到。’”

  一部成片的工作量十分惊人,成本当然也令人乍舌。以《怪物史莱克4》为例,这部90分钟的动画片,制作成本约为1.3亿美元,然后还需要额外的1.3亿美元和1.5亿美元用于发行和市场营销。

  虽然最终的成片是电脑制作的,但是创造一部动画片依然需要人工绘制。梦工厂的每部影片都有故事板,每个场景都需要艺术家手工绘制。每部影片需要大约7万到10万个故事板。

  梦工厂的大部分IT基础设施统一采用了惠普的BladeSystem c-Class服务器刀片,约有3000块,每块刀片都预配置好了计算、存储和网络架构。梦工厂还使用了惠普的NAS和3Par存储阵列。唯一的例外是使用了少量的HDS的存储阵列和NetApp的NAS。

  梦工厂工作室的服务器机柜都配备了通风“烟囱”,可以把热空气向上排出室外。“冷热气流从不混合,”Cutler说。“所以也不需要冷却系统。”

  一排惠普刀片服务器机柜。服务器散发的热气排进一个封闭的烟囱里,因此不再需要额外的空调设备。

  2009年,在影片《怪兽大战外星人》中首次使用了3D成像技术,电脑制作一直在不断地推升着梦工厂的技术需求。3D电影需要额外增加100TB存储量,因为很多画面都得加倍。

  年底的假期档,米高梅公司发行的《霍比特人》将是首部采用每秒48帧技术制作的电影。

  “如果观众认可这种体验,那将会对存储和渲染带来巨大的影响,”Wike说。

 

 

1
3