网易首页 > 网易数码 > 正文

把旧数据“冷冻”起来,Facebook这是在干吗?

0
分享至
摘要:当有人提到“可持续发展”这个词语的时候,第一个出现在你脑海里的肯定不会是数据中心。而实际上,这些有着庞大的计算机组、网络架构以及存储设备的大楼却是典型的耗电大户。原因就在于,为了保障这些设备正常运转,必须要有一个巨型的冷却系统来保证其一直在低温状态下运行。它们的配电系统会在这一制冷过程中损失近千瓦的电力。

并且,为了保障设备不受突发状况导致的停电所影响,这些大厦往往还需要配备有备用电池和柴油发电机。而很明显,这两者并不是什么清洁能源,会严重影响周围的环境。

许多互联网巨头都在想办法改善这一状况——建设自己的数据中心。他们自己搭建自己的硬件系统,努力使得他们的数据中心更加环保。这样做对他们来说最直观的益处就是能够降低运营成本,并且运转起来相对也更加的便捷。很明显,有一些公司在环保方面下的力度很大,其中一个典型例子就是Facebook。Facebook大量采用自己自家的技术来搭建绿色环保的数据中心,并且把这种经验开放出来跟大家共享。Facebook最先进的阿尔图纳数据中心就采用了由廉价交换机组成的网状连接交换架构来提升性能,Facebook称之为下一代的数据中心——Data Center Fabric。这对于提升数据中心的网络性能、降低成本以及提高能效起到了非常关键的作用。

所有这一切都开始于8年前,当时Facebook正在着手设计其位于Prineville的第一个数据中心。Facebook自那时开始,就已经聘用了专门负责可持续发展的董事Bill Weihl,他直接对Facebook的环保工作负责。在此期间,Facebook已经做了很长时间的实验,来研究如何设计建立用可持续能源来供电的绿色数据中心。

冷存储(cold storage)

如今,Facebook的数据库中有数十亿的图片,而你肯定无法想像为了存储这些图片将会消耗掉多少电力。在2013年,Facebook的图片存储系统HayStack一共产生了1EB的数据流量。(1EB=1024PB;1PB=1024TB;1TB=1024GB)这个数字是非常惊人的。虽然这些图片在大多数情况下在被分享几周之后就很少再会被查看了,但是Facebook仍然需要保存他们,而且必须要确保即使是在硬盘出现故障的情况下也要保障图片文件的完整性。

这就意味着Facebook需要在数据中心保存大量的数据,为了保证这一点就需要其提供大量的电力。而Facebook的工程师则巧妙的利用了“负瓦特”,开发了一个名叫"Cold Storage"的系统。Cold Storage能够允许Facebook数据中心内超过一半的磁盘在任何时候关机,从而实现大幅降低功耗。现在,Facebook的存储团队正在考虑进一步节约能源,比如将老旧的图像拷入蓝光磁盘内。

目前Facebook已经在Prineville及 Forest 两个中心建设了两套cold storage系统。cold storage系统的每个服务器机柜可容纳1.92 PB的数据。因此,在完全架设完毕的情况下,每一个数据中心可以存储1EB的数据。而且Facebook在设计时还考虑到了未来。很多系统在规模扩大或者利用率上升时往往就会出现性能下降的问题,而Facebook的这套系统则从一开始设计时就考虑到了。Facebook的做法是每次增加容量时,都将软件对现有数据进行再平衡。也就是说将原有数据分配到新的硬件上,并释放之前用过的空间。这个过程并非实时进行,十分适合用于系统的逐步移植。这样既不影响系统的使用,又能逐步将数据迁移到新硬件上。如果把Cold Storage看作一块大硬盘的话,这种再平衡的做法就可以视为智能硬盘整理程序。

降低耗电是开发Cold Storage系统的主要目的之一。据介绍这套系统的耗电极低,仅需消耗传统数据中心 1/6的电量。其主要手段就是以空间换功耗——Facebook的数据中心占地面积非常大。但是随着以后单盘容量的提升,其存储规模还可以进一步扩大。同时由于cold storage存放的不是活跃数据,而是历史数据,所以 Facebook可以把冗余电力系统(不间断电源、柴油发电机、备用电池等)也抛弃了,从而进一步提升了能效。

为了尽可能降低能耗,Cold Storage 允许服务器不带硬盘一起启动,之后将由软件来控制其闲时时段。不过这样就要求Facebook对Open Vault的存储规范进行修改。Facebook最大的改动就是——每次只允许为每个托盘上的一块硬盘供电。为了避免软件bug错将所有硬盘都供电,导致数据中心保险烧坏,Facebook甚至还专门修改了每一块硬盘驱动器的固件。此外,由于不需要每次都给所有硬盘供电了,Facebook还通过一系列的优化成功使得机架的存储密度大大增加,与传统存储服务器相比,其耗电只有后者的 1/4。

提升能源使用效率

在2012年,纽约时报的一篇报道揭露了IT业数据中心效率低下,耗电量惊人的问题。自此之后,降低数据中心能耗效率值(PUE)便成了考核数据中心的热门指标之一。(PUE指数据中心总耗电量与IT设备耗电量的比值,这个值越接近1,数据中心的能耗效率就越高)。

而Facebook位于北卡莱罗纳的数据中心仅通过使用自然风制冷,并提高服务器硬件的耐热性能,就打造出了PUE能耗效率值仅为1.07的超级绿色数据中心。这个数值也大大超过了Google数据中心PUE能耗效率值——1.12。据介绍,Facebook使用Bin Maker软件分析天气数据,预测出北卡莱罗纳的温度和湿度,然后通过美国采暖、制冷和空调工程师协会(ASHRAE)的数据来判断是否需要使用空调。

此外,Facebook还根据其发布的Open Compute标准开发出了能耐受更高室内温度和湿度的服务器硬件,并通过改善传统数据中心电力供应链来减少在电力转换过程中的能源损失。对传统服务器来说,如果一个UPS坏了或者电源部件坏了,整个数据中心就瘫痪了,而对Open Compute来说,只是某个部分不能继续使用罢了。另外,在维修传统服务器时,维修人员必须将整个服务器拿出来,用工具拆开后才可以修理;而Open Compute则采用了通用电源插座,维修时直接通过滑轨拉出来就可以实现在线维修。为了进一步提高能源使用效率,甚至连数据中心楼道里的灯都是只有在人通过的情况下才会亮。Facebook在提高数据中心能源使用效率上下的功夫可见一斑。

相关推荐
热点推荐
被华为超越!戴尔电脑中国销量大跌44%:越来越没人买了!联想市场份额38%排第一,销量下降19%

被华为超越!戴尔电脑中国销量大跌44%:越来越没人买了!联想市场份额38%排第一,销量下降19%

和讯网
2024-03-26 15:37:44
武警上将官至副总参谋长,过年他家门口没人扫雪,年后果然出了事

武警上将官至副总参谋长,过年他家门口没人扫雪,年后果然出了事

扬平说史
2024-03-27 09:17:14
戴口罩!戴口罩!戴口罩!传染性极强

戴口罩!戴口罩!戴口罩!传染性极强

中吴网
2024-03-28 16:15:28
闹大了!知名音乐人炮轰周深:一直以来装嫩,录综艺装范儿

闹大了!知名音乐人炮轰周深:一直以来装嫩,录综艺装范儿

飞哥AI矩阵
2024-03-27 16:15:56
男子酒后误开邻居家门,与女主人发生关系,居然得逞……

男子酒后误开邻居家门,与女主人发生关系,居然得逞……

极品小牛肉
2024-03-01 22:37:49
曝42岁李晨上海遛娃!推简易婴儿车太低调,女儿五官清秀超像爸

曝42岁李晨上海遛娃!推简易婴儿车太低调,女儿五官清秀超像爸

阿桥侃娱乐
2024-03-27 16:09:14
随着湖人战胜灰熊、掘金不敌太阳,西部最新排名及形势如下!

随着湖人战胜灰熊、掘金不敌太阳,西部最新排名及形势如下!

金风体育
2024-03-28 13:27:57
我1981年退伍,分配毛毯厂保卫科,严打时借用公安局彻底改变命运

我1981年退伍,分配毛毯厂保卫科,严打时借用公安局彻底改变命运

书中自有颜如玉
2024-03-28 10:59:49
正式表态!太阳引爆联盟,杜兰特尴尬了,恐重返雷霆!

正式表态!太阳引爆联盟,杜兰特尴尬了,恐重返雷霆!

体育晓二
2024-03-27 21:36:06
遮羞布彻底盖不住了!刘德华赖文慧关系曝光,除了结婚证啥都给了

遮羞布彻底盖不住了!刘德华赖文慧关系曝光,除了结婚证啥都给了

舞娱天地
2024-03-14 16:12:05
孕期同房,老公那东西会不会“顶”到胎儿?这7点需注意,勿猴急

孕期同房,老公那东西会不会“顶”到胎儿?这7点需注意,勿猴急

阿燕姐说育儿
2024-03-28 14:28:05
农村“假寡妇”不断增多,你知道她们有多可怜么,深夜才是最可怕

农村“假寡妇”不断增多,你知道她们有多可怜么,深夜才是最可怕

花生科技杂谈
2024-03-28 07:25:30
高海宁:为何《三十而已》里一亮相就把江疏影秒了?

高海宁:为何《三十而已》里一亮相就把江疏影秒了?

拿数据说话
2024-03-27 14:43:51
莫斯科恐袭,俄罗斯后悔了!3个可能的真凶曝光,世界大变局要来

莫斯科恐袭,俄罗斯后悔了!3个可能的真凶曝光,世界大变局要来

李大娱乐糊涂
2024-03-28 13:18:14
火箭豪取10连胜 队史自2017-18赛季以来最长

火箭豪取10连胜 队史自2017-18赛季以来最长

直播吧
2024-03-28 10:57:35
孙俪新剧疑提前翻车!搭档小11岁董子健演姐弟恋,鸡皮疙瘩都起来

孙俪新剧疑提前翻车!搭档小11岁董子健演姐弟恋,鸡皮疙瘩都起来

小徐讲八卦
2024-03-28 15:44:46
A股回落,沪指午后失守3000点

A股回落,沪指午后失守3000点

每日经济新闻
2024-03-28 14:45:14
直击日本:全世界的樱花都开了,除了日本?

直击日本:全世界的樱花都开了,除了日本?

小日子万象
2024-03-28 15:56:37
【金敬迈】开除刘少奇党籍,不可怕;但全党都同意,这才可怕!

【金敬迈】开除刘少奇党籍,不可怕;但全党都同意,这才可怕!

年之父
2024-03-15 06:10:03
印尼总统大选结束,强硬派防长胜出,第一时间就中美博弈做出表态

印尼总统大选结束,强硬派防长胜出,第一时间就中美博弈做出表态

成视Talk
2024-03-28 09:09:04
2024-03-28 17:02:44

头条要闻

媒体:中国领导人对"中国见顶论"的回应非常重要

头条要闻

媒体:中国领导人对"中国见顶论"的回应非常重要

体育要闻

池江璃花子:我不打算输

娱乐要闻

莱昂纳多与25岁新女友互相投喂超恩爱

财经要闻

疯狂!三个城市,三个地王!

科技要闻

王传福称合资品牌份额将降到10%

汽车要闻

混动增程双模式 长安UNI-Z售11.79万起

态度原创

游戏
旅游
教育
家居
公开课

外媒盘点中国古代背景的游戏:轩辕剑、三国志等

旅游要闻

在广西不洗澡,是不是犯了天条啊?

教育要闻

初中生给课本“换头”,课本涂鸦被比下去了,被学生的脑洞惊艳了

家居要闻

邂逅浪漫,注入柔性的法式基因

公开课

30岁之前,你要学会的13件事情

无障碍浏览 进入关怀版
×