天天看點

【深度幹貨】資料中心機櫃綜合布線

1. 寫在前頭

2. 簡介

3. 前期知識儲備

3.1 資料中心機房平面圖

3.2 資料中心機房冷循環圖

3.3 資料中心機櫃内部冷氣走向圖

3.4 布線方法

3.4.1 EOR(End of Row)

3.4.2 MOR(Middle of Row)

3.4.3 TOR(Top of Rack)

3.4.4 不同布線方法的利弊

4. 光纖技術發展發展趨勢

5. 布線規範

6. 交換機端口配置設定規範

7. 标簽張貼規範

8. 網線購買規範

9. 工程驗收

10. 方案編寫

11. 參考資料

1. 寫在前頭 

從甲方的角度看看,如何進行資料中心機櫃綜合布線改造 

本文僅僅從資料中心客戶自身為出發點,對租用資料中心中的機櫃進行按需改造的詳細介紹,并非資料中心機房基礎建設

資料中心機房建設相比于傳統的園區網,由于服務的多元化、業務無規律增加等問題,是以除了具備安全性、健壯性特點外,還需要支援較高的擴容能力和靈活的按需變化能力

【深度幹貨】資料中心機櫃綜合布線

資料中心機房平面布局通常采用矩形結構,為了保證制冷效果,通常将 10 至 20 個機櫃背靠背并排放置成一行,形成一對機櫃組。

【深度幹貨】資料中心機櫃綜合布線

機櫃組中的機櫃都采用前後通風模式,冷空氣從機櫃前面闆的吸入并從後部排出,由此在機 櫃背靠背擺放機櫃組中間形成 “熱通道”,相鄰的兩個機櫃組之間形成“冷通道”。熱通道正對機房空調,熱空氣沿熱通道流回機房空調,再開始新一次循環。

【深度幹貨】資料中心機櫃綜合布線

為了更高效的制冷,大多數機櫃内部都采用下送風、前送風方式。

【深度幹貨】資料中心機櫃綜合布線

每個機櫃組中的兩排機櫃的最邊端機櫃作為網絡列頭櫃,在網絡列頭櫃及伺服器機櫃上方會安裝配線架(由于會增加故障點,是以現在很多的網際網路公司會放棄配線架)

【深度幹貨】資料中心機櫃綜合布線
【深度幹貨】資料中心機櫃綜合布線

● EOR/MOR 

優點:有利于提高交換的端口使用率,降低裝置平均端口能耗 

缺點:水準電纜長度更長,橋架壓力大

● TOR 

優點:縮短了銅纜的使用距離,簡化了線纜管理;增加光纖的使用替代銅纜,減少了網絡擁塞,可擴充性強,可以直接複制 

缺點:網絡裝置端口資源浪費,主幹光纖使用量增加,對于核心交換機的端口需求壓力大

● 帶寬越來越高 

随着雲計算的突飛猛進,帶寬将會越來越高,萬兆已經成為必然

● 密度 

綠色機房已經越來越流行,Facebook、Google、Appl都建設了綠色機房,即使我們目前還沒達到那個程度,但是提高密度講有效的提高機房使用率,降低端口的平均能耗

● 可靠性 

需要租用資料中心的(或者自建)裝置,想必其業務的重要性,意外斷網的損失是巨大的,必須要超級高的可用性保證才行

● 管理 

資料中心的營運成本正在持續上升,我們需要更為簡易的管理方式來降低管理成本

● 遠端管理網線 

遠端管理網線使用超五類網線,從機櫃左邊(從機櫃正面看)下放,并且長度延伸至層闆右邊即可(不得超出),在層闆中間位置用紮帶固定。另外備線整理成一圈,固定在機櫃中間位置,確定能夠到達該機櫃所有位置。

● 電源線 

當資料中心使用的是交流220V電源(直接接入排插),将電源線從機櫃左邊(從機櫃正面看)下放,并且長度延伸至層闆右邊(不得超出),在層闆中間位置使用紮帶固定。 

當資料中心使用的是高壓直流電源(需要将電源線剝皮接入空開),将電源線從機櫃左邊(從機櫃正面看)下放,并且長度延伸至層闆右邊(不得超出),在層闆中間位置使用紮帶固定。接口端剝皮接入空開,地線使用銅鼻子接入地線銅線排

● 内網網線 

内網網線使用六類成品跳線,從機櫃右邊(從機櫃正面看)下放,并且長度延伸至層闆左邊即可(不得超出),在層闆中間位置使用紮帶固定。另外備線整理成一圈,固定在機櫃中間位置,確定能夠到達該機櫃所有位置。

● 外網網線 

外網網線使用六類成品跳線 ,從機櫃右邊(從機櫃正面看)下放,并且長度延伸至層闆左邊即可(不得超出),在層闆中間位置使用紮帶固定。另外備線整理成一圈,固定在機櫃中間位置,確定能夠到達該機櫃所有位置。

交換機端口使用從端口1開始,對應機櫃号小的機櫃,以此類推,備線使用端口号大的交換機端口;例如:端口1-16配置設定給機櫃1(15、16作為備線),端口17-32配置設定給機櫃2(31、32作為備線),端口33-48配置設定給機櫃3(47、48作為備線)

原則:交換機端口使用率盡量高,并且確定伺服器高可用性要求,同一機架位若接兩根網線,必須接入不同交換機

網絡維護管理者的基本工作就是保證網絡正常運作。如果沒有做相應的辨別,或者辨別不規範,當網絡發生問題時,如何在數千甚至數萬根線纜中找到發生問題的具體位置呢?

● 網線标簽 

按照标簽标準進行列印,長度使用95mm,張貼在網線水晶頭内13cm處,并且兩頭都要張貼

● 光纖标簽 

按照标簽标準進行列印,長度使用90mm,張貼在光纖頭内10cm處,并且兩頭都要張貼

● 電源線标 

簽按照現場實際情況進行列印,張貼在電源線接伺服器端13cm處,另一頭貼在空開位置或插座位置。

● 内外網網線使用米數、數量根據現場測量後進行統一訂制,必須使用六類成品網線(機器壓制水晶頭)

● 遠端管理網線使用米數、數量根據現場測量後進行統一訂制,必須使用超五類及以上成品網線(機器壓制水晶頭)

● 所有購買的網線都必須使用FLUKE測試後給出測試報告(PDF文檔)

資料中心的營運成本在持續上升,每話費1美元購置新的基礎設施,就得話費8美元開展維護和管理

● 外觀(層闆、線材位置) 

美觀很重要,人都是視覺動物,需要在美觀與實用之間尋找一個平衡點

● 電源 

電源從列頭櫃到實體伺服器,中間跳轉好幾級,我們更多的需要測試接入空開是否正常

● 網絡連通(銅纜、光纖) 

布線過程對銅纜、光纖的拉扯容易導緻線纜連通異常,需要在調試好網絡設定後,進行抽查(當然有時間可以全部測試),正常布線之前會要求綜合布線的乙方進行網線的fluke測試,以及光纖的光衰測試

● 标簽 

标簽是命門!我是栽過跟頭的,後期維護上,現場的标簽是非常重要的,列印裝置、線纜辨別、配線架辨別、面闆辨別、裝置管理辨別、辨別文檔等等都是相當重要的! 

為了最佳讀取效果,所有的标簽應由機械裝置列印,不應采用手寫方式

很多在網際網路公司在計劃進行資料中心機櫃綜合布線時都是提需求,然後由乙方來送出方案,但是經常由于雙方編寫方案的出發點不同,導緻很多需求不對稱,是以可以自己編寫方案,并嚴格要求乙方按照方案執行!當然施工過正常最重要的是需求溝通,我做過的資料中心機櫃改造項目中,70%以上的時間都在做需求溝通!! 

如果你想從甲方的角度編寫一個方案,需要做的東西如下

● 現場平面圖 

IDC機房平面圖,找營運商要電子檔(必要時候現場确認) 

機房整體确認:一排幾個機櫃;每個機櫃幾U;電源接口幾個(空開、排插接口)

● 網絡布線示意圖

● 網線接入端口詳細說明

● 光纖布線接入位置詳細說明

● 電源線接入方式說明

● 标簽列印說明

● 标簽粘貼規範說明

● 層闆調整規範說明

● 材料(自行準備、乙方準備、機房準備)

● 報價表單

● 投标确認乙方

● 如何進場 

資料中心機房通常都是租用營運商機房,是以進場都需要提前申請好,項目施工時間段;進場人員;證件;進場材料清單;出場材料清單

● 需求溝通

所有參考資料來自網絡,因沒有考察具體原出處,隻能列出大概出處,進行修改

● 51CTO綜合布線工作組部落格

● 資料中心伺服器接入部署的布線方式

● 戴爾4路伺服器解決方案及案例分析

微信号:fz_fish

【深度幹貨】資料中心機櫃綜合布線

繼續閱讀