网络巨头加速扩张资料中心
时间:2018-07-25 11:12来源:Rick Merritt, EE Times矽谷采访中心主任
摘要:网络巨头们正以疯狂速度扩充资料中心规模,他们正在为资讯科学写历史,但还不清楚这样的趋势最后会带来什么…
各家网路巨头正在进行一场类似要跟上摩尔定律(Moore's Law)的竞速,积极打造更大的分散式运算网路;他们正在为资讯科学写历史,但还不清楚这样的趋势最后会带来什么…
举例来说,Facebook在过去十年就打造了一个包含15个大型资料中心以及数百边缘网路站点的全球性网路,负责运作服务数亿用户、数以千计的软体程式,而且每两个小时就有一次软体更新。该公司工程与基础建设主管Jay Parikh表示:”当你正在打造的分散式系统每天会影响数十亿人,真的很酷…也很吓人。“
Parikhy在该公司首度于美国加州总部举行的大型分散式软体系统研讨会上,对台下约200名软体工程师与来宾表示:“我们处理的所有事情都是分散式系统问题,这在过去的扩展式(scaled)环境中是从未做过的…包括自己布建海底电缆──都是这个产业以往不曾处理过的。”
他指出,电脑与网路硬体遭遇的挑战,还有在硬体中执行的资料库与其他软体”会相互影响,衍生出关于效率、文化、预算编列…等等问题,所有事情都会互相连结。“
这场活动还邀请到了来自亚马逊云端服务(Amazon Web Services)、Google、共乘服务业者Lyft,以及电商平台Shopify等公司的程式设计师,分享最新的技术,以及探讨利用包括管理全球性分散式资料库、系统除错,还有如何在系统中断时加速复原等议题。
Facebook讨论了两项开放源码分散式软体系统工作的进展,一是能快速将配置变化推送到数以百万计伺服器的架构,另一项是处理作业系统使用者空间中记忆体失序问题的程式。
它们是Facebook为了支援旗下四大被广泛使用之应用程式──News Feed、Instagram、Messenger与WhatsApp──以及使用者族群规模较小的Oculus软体,所打造之广大云端运算软体平台的一部分。
开放源码软体以及开放性硬体…晶片?
Facebook一直在慢慢将网路架构中的现成商用软硬体以自家开发的软体或硬体方案来取代,并将之转为开放源码;举例来说,在过去几年,该公司将现成的资料库(MySQL)、储存(Memcached)程式与网路服务语言(PHP),以自家开发的程式码取代,并释出为开放源码。
在总部举行的这场Systems@Scale活动,也是为了要让Facebook的软体工程师能与其他公司的同业相互交流,目标是加速为他们面临之分散式系统挑战寻找通用解决方案的脚步。
在硬体方面,Facebook现在一般都是使用以现成晶片、采用自家规格打造的伺服器与交换机,而非来自供应商的商用系统。有业界消息指出,Facebook从今年春天起就一直在招募半导体工程师;该公司发言人婉拒对此发表评论,仅透露可能会在9月举办的一场活动中讨论到关于晶片开发的计画。
Facebook的系统硬体规格通常透过2011年成立的Open Compute Project释出开放源码,该公司是否也会在未来将自己设计的晶片规格开放,还有待观察。
另一个更大的问题是,Facebook与其竞争对手要以疯狂的速度将运算世界的未来带向何方,还有他们可能遭遇的瓶颈为何?
某些美国的立法者认为,Facebook因为在上一次总统大选让外来者利用其自动化系统影响了数以百万计的选民,已经触及了政治上的一道障碍;也有人说他们是在玩弄消费者,那些无辜使用者开心分享的每一项资料都被贩售,但是到目前为止几乎不受政府监督。
在技术上,这家网路巨头多年来推动速度更快的铜缆与光学网路,他们同时需要这两种技术来资料中心内连结数量更庞大的伺服器以及资料中心本身。
多年来,网路工程师在催生Terabit/sec等级网路的行动上一直有所延迟,Terabit/sec网路的速度超越其他商用需求,在某些程度上什至超越了摩尔定律或物理定律的极限。无论Facebook等公司不断扩大资料中心规模的趋势将会带来什么结果,显然我们会很快看到。
未来的场景就如同Parikh所言,会“很酷也很吓人”;网路巨头们正在以前所未见的速度打造、扩充大型自动化系统,数以百亿计的消费者与成千上万的企业,则正在大量吞噬他们运作的各种服务。他表示:”让我振作的第一大动力,就是在稳定的基础建设上快速行动。“
编译:Judith Cheng
(参考原文:Data Center Scaling at Breakneck Pace,by Rick Merritt)
举例来说,Facebook在过去十年就打造了一个包含15个大型资料中心以及数百边缘网路站点的全球性网路,负责运作服务数亿用户、数以千计的软体程式,而且每两个小时就有一次软体更新。该公司工程与基础建设主管Jay Parikh表示:”当你正在打造的分散式系统每天会影响数十亿人,真的很酷…也很吓人。“
Parikhy在该公司首度于美国加州总部举行的大型分散式软体系统研讨会上,对台下约200名软体工程师与来宾表示:“我们处理的所有事情都是分散式系统问题,这在过去的扩展式(scaled)环境中是从未做过的…包括自己布建海底电缆──都是这个产业以往不曾处理过的。”
他指出,电脑与网路硬体遭遇的挑战,还有在硬体中执行的资料库与其他软体”会相互影响,衍生出关于效率、文化、预算编列…等等问题,所有事情都会互相连结。“
这场活动还邀请到了来自亚马逊云端服务(Amazon Web Services)、Google、共乘服务业者Lyft,以及电商平台Shopify等公司的程式设计师,分享最新的技术,以及探讨利用包括管理全球性分散式资料库、系统除错,还有如何在系统中断时加速复原等议题。
Facebook讨论了两项开放源码分散式软体系统工作的进展,一是能快速将配置变化推送到数以百万计伺服器的架构,另一项是处理作业系统使用者空间中记忆体失序问题的程式。
它们是Facebook为了支援旗下四大被广泛使用之应用程式──News Feed、Instagram、Messenger与WhatsApp──以及使用者族群规模较小的Oculus软体,所打造之广大云端运算软体平台的一部分。
开放源码软体以及开放性硬体…晶片?
Facebook一直在慢慢将网路架构中的现成商用软硬体以自家开发的软体或硬体方案来取代,并将之转为开放源码;举例来说,在过去几年,该公司将现成的资料库(MySQL)、储存(Memcached)程式与网路服务语言(PHP),以自家开发的程式码取代,并释出为开放源码。
在总部举行的这场Systems@Scale活动,也是为了要让Facebook的软体工程师能与其他公司的同业相互交流,目标是加速为他们面临之分散式系统挑战寻找通用解决方案的脚步。
在硬体方面,Facebook现在一般都是使用以现成晶片、采用自家规格打造的伺服器与交换机,而非来自供应商的商用系统。有业界消息指出,Facebook从今年春天起就一直在招募半导体工程师;该公司发言人婉拒对此发表评论,仅透露可能会在9月举办的一场活动中讨论到关于晶片开发的计画。
Facebook的系统硬体规格通常透过2011年成立的Open Compute Project释出开放源码,该公司是否也会在未来将自己设计的晶片规格开放,还有待观察。
Facebook在全球有15座大型资料中心,但其实比起Amazon截至2017年在全球的18个据点仍相形见绌;Amazon的据点各有数量不一的资料中心(黄圈中的数字)
(来源:“Computer Architecture: A Quantitative Approach,” Hennessy/Patterson)
另一个更大的问题是,Facebook与其竞争对手要以疯狂的速度将运算世界的未来带向何方,还有他们可能遭遇的瓶颈为何?
某些美国的立法者认为,Facebook因为在上一次总统大选让外来者利用其自动化系统影响了数以百万计的选民,已经触及了政治上的一道障碍;也有人说他们是在玩弄消费者,那些无辜使用者开心分享的每一项资料都被贩售,但是到目前为止几乎不受政府监督。
在技术上,这家网路巨头多年来推动速度更快的铜缆与光学网路,他们同时需要这两种技术来资料中心内连结数量更庞大的伺服器以及资料中心本身。
多年来,网路工程师在催生Terabit/sec等级网路的行动上一直有所延迟,Terabit/sec网路的速度超越其他商用需求,在某些程度上什至超越了摩尔定律或物理定律的极限。无论Facebook等公司不断扩大资料中心规模的趋势将会带来什么结果,显然我们会很快看到。
未来的场景就如同Parikh所言,会“很酷也很吓人”;网路巨头们正在以前所未见的速度打造、扩充大型自动化系统,数以百亿计的消费者与成千上万的企业,则正在大量吞噬他们运作的各种服务。他表示:”让我振作的第一大动力,就是在稳定的基础建设上快速行动。“
编译:Judith Cheng
(参考原文:Data Center Scaling at Breakneck Pace,by Rick Merritt)
免责声明:本文若是转载新闻稿,转载此文目的是在于传递更多的信息,版权归原作者所有。文章所用文字、图片、视频等素材如涉及作品版权问题,请联系本网编辑予以删除。
我要投稿
近期活动
- 仪器使用操作视频教程时间:2023年12月31日 - 2024年01月31日[立即参与]
- 安森美汽车&能源基础设施白皮书下载时间:2023年04月03日 - 2023年11月30日[立即参与]
- 2023年安森美(onsemi)在线答题活动时间:2023年08月01日 - 2023年08月31日[查看回顾]
- 【在线答题活动】PI 智能家居热门产品,带您领略科技智慧家庭时间:2023年06月15日 - 2023年07月15日[查看回顾]
- 2023年安森美(onsemi)在线答题活动时间:2023年06月01日 - 2023年06月30日[查看回顾]
分类排行榜
- 汽车电子电源行业可靠性要求,你了解多少?
- 内置可编程模拟功能的新型 Renesas Synergy™ 低功耗 S1JA 微控制器
- Vishay 推出高集成度且符合 IrDA® 标准的红外收发器模块
- ROHM 发布全新车载升降压电源芯片组
- 艾迈斯半导体推出行业超薄的接近/颜色传感器模块,助力实现无边框智能手机设计
- 艾迈斯半导体与 Qualcomm Technologies 集中工程优势开发适用于手机 3D 应用的主动式立体视觉解决方案
- 维谛技术(Vertiv)同时亮相南北两大高端峰会,精彩亮点不容错过
- 缤特力推出全新商务系列耳机 助力解决开放式办公的噪音难题
- CISSOID 和泰科天润(GPT)达成战略合作协议,携手推动碳化硅功率器件的广泛应用
- 瑞萨电子推出 R-Car E3 SoC,为汽车大显示屏仪表盘带来高端3D 图形处理性能
编辑推荐
小型化和稳定性如何兼得?ROHM 推出超小型高输出线性 LED 驱动器 IC,为插座型 LED 驱动 IC 装上一颗强有力的 “心脏”
众所周知,LED的驱动IC担负着在输入电压不稳定的情况下,为LED提供恒定的电流,并控制恒定(可调)亮度的作用。无论是室内照明,还是车载应用,都肩负着极为重要的使命。
- 关于反激电源效率的一个疑问
时间:2022-07-12 浏览量:9667
- 面对热拔插阐述的瞬间大电流怎么解决
时间:2022-07-11 浏览量:8427
- PFC电路对N线进行电压采样的目的是什么
时间:2022-07-08 浏览量:9040
- RCD中的C对反激稳定性有何影响
时间:2022-07-07 浏览量:6840
- 36W单反激 传导7~10M 热机5分钟后超标 不知道哪里出了问题
时间:2022-07-07 浏览量:5576
- PFC电感计算
时间:2022-07-06 浏览量:3801
- 多相同步BUCK
时间:2010-10-03 浏览量:37794
- 大家来讨论 系列之二:开机浪涌电流究竟多大?
时间:2016-01-12 浏览量:43078
- 目前世界超NB的65W适配器
时间:2016-09-28 浏览量:59954
- 精讲双管正激电源
时间:2016-11-25 浏览量:127223
- 利用ANSYS Maxwell深入探究软磁体之----电感变压器
时间:2016-09-20 浏览量:107352
- 【文原创】认真的写了一篇基于SG3525的推挽,附有详细..
时间:2015-08-27 浏览量:99844