Facebook 正在打造下一代开源硬件,将新技术融入其数据中心平台,Facebook使用大量强大科技——包括固态硬盘(SSDs), 图形处理器(GPUs), 非易失性存储器(NVM)和闪存簇(JBOFs)——以打造新的服务器和存储装置,加速基础设施。
这些升级是Facebook打造强大数据中心网络的一部分,这一网络将扩展互联网服务的边界。
「接下来的十几年,我们的体验将更加依赖于人工智能和虚拟现实这类技术,」Facebook CEO 马克·扎克伯格说。「这对计算性能提出了更高要求,通过开放计算项目(Open Compute Project,以下简称OCP),我们正在开发全球性的基础设施,让人人都能享受互联网服务。」
Facebook在开放计算峰会(Open Compute Summit,以下简称OCS)上公布了项目进展。OCS是不断扩大的开源硬件社区成员的聚会,他们设计的产品在Facebook的数据服务器上焕发活力。峰会展示了许多基础设施的升级。包括:
重新打造的服务器尺度形态来在同等能源消耗数量下提升性能。
新的高性能数据分析服务器,由GPUs驱动,而非CPUs。
改进后的存储设备分隔单位(storage sled),在这里,最初的JBOD(just a bunch of disks)变成快得多的JBOF(just a bunch of flash)。
改进非易失性存储器(NVM)实验,为存储分层提供更多选择。
此次峰会标志着OCP项目成立五周年,也促使人们反思自2011年Facebook为推动其发布的设计创新而成立该项目以来,OCP 的发展情况。
「我们现在取得的进步是值得关注的,」OCP 项目董事长Jason Taylor 表示,他同时也是Facebook Infrastructure 部门副总裁之一。「OCP就是一个让工程师聚在一起,创造惊艳产品的地方。」
「我感受到了巨大的动力,因为我们超越了超大型主机(hyperscale),还进入了金融和电信领域,」他说。
服务器:下一代设计
Facebook 彻底革新了服务器设计和基础设施,从传统的双服务器处理器转为基于单个英特尔Xeon-D处理器系统芯片(SoC),该处理器耗能更少,还解决了几个架构问题。
The Mono Lacke服务器的主板装入到一个叫Yosemite的组装单位中,Yosemite的每一个滑动单元底架上可以安装4个SoC,即4个Mono Lake。Facebook 工程师Vijay Rao 和Edwin Smith在Facebook 工程博客上描述了这一新设计。
「我们就新处理器的设计与英特尔紧密合作,同时重新设计自家的服务器基础设施以打造一个满足我们需求的系统,也能为行业其他公司所广泛采用。」他们在博客中写道。「结果表明,配备更低功耗的CPUs 的单处理器服务器在网络负载上比双处理器服务器表现更好,也更适合数据中心负载…与此同时,我们重新设计的服务器基础设施,在同等电源基础上,容纳每个机架双倍的CPUs数量。」
新的设计提升了处理器和处理器之间、处理器和内存之间的通信效率。
「我们将CPU简化至正好能满足我们要求,」这两位工程师表示,「我们移除了QPI链接,缩减了英特尔的成本。考虑到我们的服务器将基于同一的插槽,这也解决了我们NUMA问题。我们将其设计为整合芯片集的系统芯片,更加简单。这种接口一致的CPU散热设计功耗(TDP)更低。与此同时,我们重新设计的服务器基础设施,在同等电源条件下,容纳每个机架双倍的CPUs数量。」
这使得Facebook制造出一个可以在每个机架上获得更高性能的服务器体系结构,同时确保每个机柜能量消耗密度保持在11千瓦以下。
强大的人工智能数据分析服务器
Facebook 在会上还分享了GPUs最新进展,近年来,GPU在高性能计算中发挥了重要作用。GPUs 最初是用于提升桌面PC性能,处理图形运算,但是现在却帮助提升全球一些性能最强大的超级计算机。
Facebook 使用GPUs给人工智能和机器学习数据分析带来更强大的计算能力。其人工智能实验室训练神经网络去解决新问题。这就需要强大的计算能力。