天天看點

Facebook在北極的資料中心

Facebook在北極的資料中心

facebook每天處理3.5億張照片、45億個“贊”和100億條消息。這意味着facebook需要為此配備難以置信的、巨大的技術基礎設施。通常情況下,網際網路企業會直接去購買伺服器,但facebook幾年前就開始通過設計自己的系統和外包基建項目來建立自己的服務系統。最近,facebook向部分美國媒體開放了其位于北極圈附近的資料中心,并介紹了其在資料服務方面的規劃。如果延展開來,這将是一場會動搖傳統資料與硬體服務商商業根基的革命,會讓惠普、戴爾等傳統廠商坐不住。本文來自彭博商業周刊,騰訊科技翻譯,虎嗅進行了節選編輯:

2011年4月,作為其“開放計算項目”(open compute project)的一部分,facebook,這家社交網絡公司釋出了一部分服務系統硬體設計藍圖——其他公司的工程師可以按照這個藍圖搭載起自己的系統。現在,這個開源項目激起了資料服務行業十多年來最大的轉變。

惠普、戴爾和思科等這樣的計算機行業巨頭每年會銷售1000億美元的硬體,包括伺服器、儲存、網絡産品等。如果把安全服務、資料分析系統和相關軟體的銷售額計算在内,那這個數字遠不止這個。是以你可以了解,在看到facebook公開更高效且免費的裝置結構設計時,這些公司感受到的最直接的威脅。

安德森·霍洛維茨風險投資公司合夥人之一彼得·萊文(peter levine)表示:“資料服務行業正在發生翻天覆地的變化。這意思是說,數百億美元,甚至上萬億美元的收益将從傳統行業巨頭那裡流轉至使用類似facebook技術的新晉公司。”

facebook位于北極圈南的資料中心

facebook的開源試驗中心位于北極圈以南100公裡的瑞典呂勒奧鎮(luleå)邊沿的森林中,于今年6月份向外界公開。這個巨大的資料中心是facebook在美國本土之外建立的第一座資料中心,也是facebook在歐洲最大的資料中心。它由數以千計的矩形金屬闆組成,看起來就像一個外表不規則的飛船。以所有公開的标準來衡量,它是有史以來最高效節能的計算設施。一般來說,普通的資料中心要消耗3瓦特的能量用于電力和冷卻,才能産生1瓦特用于計算。相比之下,呂勒奧鎮資料中心的這個比率僅為1.04:1,比一般資料中心環保三倍左右。伺服器制造商rackable systems前首席執行官湯姆·巴頓(tom barton)指出:“facebook的開源項目給硬體市場帶來了戲劇性的影響,行業内的每個競争者都感覺到壓力。”

資料中心的選址與系統的效率有很大的關系。瑞典擁有大量的、廉價的和可靠的電力能源,由無數的水電大壩提供。同樣重要的是,facebook設計過的資料中心能充分利用瑞典的寒冷氣候。facebook不是依靠巨大的空調機組和強大的電力系統來冷卻其數萬台發熱的電腦,而是天然的冷空氣。被過濾器和霧化器處理後,從外界進來的冷空氣會像水一樣“沖洗”伺服器。與傳統的倉儲式伺服器場不同的是,呂勒奧鎮的資料中心像一個一體裝置一樣運作。

為了簡化其伺服器(這些伺服器主要被用來建立網頁),facebook的工程師去除了許多典型的元件,比如額外的記憶體插槽、電纜和塑膠保護包裝。伺服器基本上就是一個簡裝和外露的主機闆,被放置在冰箱大小的機架上。工程師解釋說,這種設計的目的是讓通風效果更好。基于這種伺服器架構的系統需要的冷卻也更少。由于多餘的元件被拆掉了,伺服器可以在高達85華氏度的環境中工作(大多數伺服器在75華氏度的時候都會挂掉)。

facebook将在美國的愛荷華州建立起一個類似的資料中心——該州有廉價的風電。該公司也已開始設計它自己的存儲和網絡系統。facebook硬體設計和供應鍊業務副總裁弗蘭克·弗蘭科夫斯基表示,硬體供應商很驚訝,他們的反應是“噢,我的天哪,你偷了我的奶酪”。

傳統硬體商的反應

面對facebook的開源項目,惠普已經出作應對,并釋出了一個名為moonshot的伺服器和和網絡系統——使用非常低功耗晶片。惠普表示,這是該公司近幾年來在資料服務上最激進的發展。惠普也在通過水冷卻來提高伺服器效率。該公司很坦率地面對facebook的開放設計項目。惠普副總裁保羅·桑德勒說:“我認為,‘開放計算項目’讓我們變得更好。facebook的所作所為令人吃驚,但是我們的反應也非常迅速。”

相比之下,思科淡化“開放計算項目”帶來的威脅。思科發言人大衛·麥卡洛克說:“很少有公司會購買這種專門用于消費者網絡公司的系統。從大局來看,我們認為這個趨勢對思科無多害處。”戴爾則于六年前成立了一個特别的小組,專門向消費者網絡公司出售廉價的系統。從那以後,戴爾年收入的增長率都在10%以上。戴爾資料中心解決方案的執行董事 德魯·舒爾克表示:“可以肯定的是,我們不像要被迫停業的公司。”

谷歌和亞馬遜對定制的硬體設計一直諱莫如深,而facebook的開放性讓非網際網路公司也産生了興趣。facebook已經公開了一個“路線圖”——任何一家公司隻要有足夠的時間和金錢,就可以按照這個路線圖一步一步建立起自己最先進的資料中心。英特爾和高盛的高管已經加入了“開放計算項目”的基金——這是一個由弗蘭科夫斯基主持的501(c)(6)免稅組織。台灣硬體廠商,如廣達電腦和泰安電腦,已經開始銷售基于開放計算設計的系統。facebook呂勒奧鎮的資料中心可能要花費3億美元才能建立起來,這個規模不是一般的公司可以支撐的。但是,它們可以利用更便宜更節能的裝置。

多年來,華爾街也試圖推動主流硬體制造商提供更簡單更便宜的系統。然而,富達投資執行副總裁喬治·布雷迪說,這些公司沒有足夠的采購影響力。富達投資已經購買了基于“開放計算項目”的系統。“我們有數萬台伺服器,而谷歌和facebook有數百萬台伺服器。”不過,現在富達投資也能在美國内布拉斯加州奧馬哈市建立起自己的資料中心——那裡的土地和能源更便宜。布雷迪說:facebook幫助我們搞明白了這些元件。這就像100年前汽車裝配生産線的行為一樣,在宏大的工業運動之下找出基本的原則。”

<b>原文釋出時間為:2013-10-09</b>

<b></b>

<b>本文來自雲栖社群合作夥伴“大資料文摘”,了解相關資訊可以關注“bigdatadigest”微信公衆号</b>

繼續閱讀