数据中心拥有的三大资源该如何节约 绿色数据中心

2014-12-11    来源:D1Net    编辑:harbor
硬盘、带宽、计算能力是数据中心最宝贵的三大资源,也是衡量一个数据中心能力的三大性能参数。随着大数据时代的到来,信息和数据大爆炸。

  硬盘、带宽、计算能力是数据中心最宝贵的三大资源,也是衡量一个数据中心能力的三大性能参数。随着大数据时代的到来,信息和数据大爆炸。IDC和EMC曾联合发布“2020年的数字宇宙”报告预测到2020年,全球数字宇宙将会膨胀到40000EB,均摊每个人身上是5200GB以上,这个量将会如何被有效存储和应用,我们眼下还很难想象,就算将世界现有的数据中心规模再扩大一倍也无法满足。按照这个预测,未来每两年数据就会翻一倍,这么多的数据要存储、计算和传输,显然数据中心是无法满足的,这样数据中心的建设步伐是跟不上的数据量增长的,供需矛盾在数据中心领域将长时间存在。如何利用现有的数据中心资源来最大限度地发挥作用是一个值得深入研究的课题,这大大提升数据中心运维的效率,本文就将讨论如何去节省数据中心的三大资源。

  数据中心任何的应用都是对各种数据的处理,自然要存储大量的数据,硬盘资源非常重要。仅我国的存储市场2013年的出货容量超过1个EB,未来存储的总容量可能达到18个EB,数据中心需要存储大量的数据,硬盘资源非常紧张,这就需要对硬盘的使用进行节制。其实,在数据中心的业务运行过程中,会产生大量的临时数据,甚至是无用的数据,这些数据占据了大量的硬盘空间。比如我们平时上网,在电脑上会留下历史浏览的网页记录,这些都占用存储空间,所以要及时地对临时数据进行回收,这样可以空出大量的硬盘空间。有些硬盘存储的数据可能几年都无人访问,这样的数据应该及时进行清理,不过数据中心存储的数据经常上千TB,哪些是无用的哪些是有用的不是很好分辨,不过可以通过访问时间进行甄别,通过软件对数据中心的数据进行管理,检查是否有长时间无人访问的数据,超过一定时间的数据软件就要记录,提示数据中心的运维人员,这些数据是否还有必要保留,这样可以及时清理出硬盘空间。对于业务运行过程中产生的中间数据,基本都是无用的数据,这些数据应该及时清除,这个可以通过软件进行判别,然后决定保留还是删除。现在视频应用非常普遍,视频资源特别占用硬盘空间,尤其是做视频搜索需要将所有的视频资源都镜像到本地,而且视频数据更新是非常快的,特别占用硬盘资源,因此对于这类数据,可以采用压缩的方式存储,有些压缩算法可以达到100:1的效果,存储到硬盘中的数据都采用压缩后的数据方式保存,当需要访问时,直接通过解压缩的方式获取。同时对于相同的数据,避免保存多份,即使这些数据分属于部分的拥有者,在硬盘上可以只保存一份真实完整的数据,其它多份数据只保存索引即可。从用户的角度看还是完整的数据,随时可以访问,而在数据中心的后台,对于用户的数据都是通过索引还访问硬盘里的唯一一份真实数据,其它保存的都是数据索引,这种技术可以为数据中心节省大量的硬盘资源。

  带宽也是数据中心重要的资源,带宽可以提升用户体验。在云计算时代,带宽的优劣直接影响到云计算的实施和效果。我们经常抱怨访问某某网站慢,其主要原因就是带宽不足。当访问数据中心的一些应用时,当然不仅仅是数据中心内部,数据中心外部的带宽也对此有很大影响。单从数据中心内部带宽方面来讲,还是有很多可能优化的地方的。首先,传统的数据中心网络技术本身就存在大量的带宽浪费,比如STP、RRPP等二层环路协议,协议本身就要阻塞部分的转发链路,造成了网络带宽的大量闲置,所以新一代的网络技术特别强调要不阻塞转发。其次,数据中心的流量并不是均匀的,有特定业务的流量高峰期,也有局部业务应用的高峰期,所以还对数据中心进行合理规划,调整业务分布,将优势的带宽资源提供给大流量重要的业务使用。对于局部可能产生拥塞的网络,及时进行扩容,或者将其它地方的网络资源充分利用起来。再次,带宽资源是有限的,随着网络流量的增长必然会出现拥塞的地方,为了保证数据中心重要业务的运行,可以部署QOS技术,对重要业务进行高优先级处理。

  计算是数据中心最重要的资源,计算资源具体包含有计算的软件和计算的硬件。这两年云计算和大数据的出现改变了传统计算软件单兵作战的现状,充分发挥数据中心整体设备的计算能力,从而提升整个数据中心的计算能力。云计算软件算法的好与坏直接决定了计算的效率和结果,软件计算能力的提升往往需要技术的积累,不能一撮而就。如今软件几乎一统天下,硬件沦为配角,硬件发挥的作用越来越小,不过也不是说硬件就不重要的,没有这些承载计算的服务器硬件,软件又从何谈起呢。所以目前数据中心对服务器的需要依然很大,我们知道数据中心里的服务器利用率普遍不高,CPU占用一般不超过30%,那么采用虚拟化技术,多核技术就可以让CPU高速运转起来,CPU只要控制在70%左右,计算效率完全不会受到影响,现在怎样提升数据中心的计算能力已经成为了业界研究的热点,数据中心只有拥有更多的计算资源采用部署更多更重要的应用。当然,计算资源在数据中心也普遍存在浪费的现象,比如CPU占用率低,老化设备闲置,部分设备长期空转(未带业务运行),这些现象都应该及时进行纠正,提升数据中心人员保护计算资源的意识,这样才能将数据中心的资源充分利用起来。

  硬盘、带宽、计算是数据中心最重要的三大资源,如何管理和节省使用这些资源,将决定了数据中心能否长期良好的运转下去。本文介绍了一些节省资源的方法,有条件的值得实施,这些方法也是业界普遍采用的一些方法。不管怎样,希望通过此文提升大家对数据中心资源节约的意识。现在整个国家都在倡导建设节约型的社会,我们应该从自身做起,在数据中心行业里形成良好的节约风气,对国家对数据中心对人民都有好处。

1
3