像閃存,NVMe,以及英特爾公司Optane這樣的存儲級記憶體正大幅提升存儲容量,非常适合推動存儲需求最大化的工作負載,如容器,大資料,機器學習,以及超融合基礎設施,所有這些技術與應用都使用檔案和對象存儲,而不是SAN的塊存儲。但是除了高速存儲之外,這些工作負載還需要低延遲網絡,線程不會阻塞的CPU,尤其是使用軟體定義網絡的超融合系統。
以太網是一個衆所周知的協定,安裝以太網的網絡并沒有光纖通道那樣的複雜性和脆弱性,而在這種情況下,必須考慮到安裝時彎曲電纜的角度,以及限制電纜的長度,其網絡傳輸速度不限于10Gb/s,還可以移動到25Gb/s,40Gb/s或100GB/s。
但是TCP(傳輸控制協定)有很多開銷,這意味着CPU花費了大量的時間來管理網絡傳輸,用于寫入密集型工作負載(如資料庫),進而降低了這些工作負載的整體性能。這就是RDMA(遠端直接記憶體通路)發揮重要作用的地方。
Windows Server的首席項目經理Jeff Woolsey最近在微軟的Ignite技術大會上指出,“當你對系統進行大量寫操作時,超融合系統的性能将會下降。如果你有一個單一的節點正在進行70%的寫入,并且必須盡可能快地複制到另一個節點,如果你沒有采用RDMA,CPU必須介入執行操作,而在10Gb的以太網網絡接口卡(NIC)上寫入很容易完全占用一兩個CPU的資源。”
RDMA的直接連接配接可以減少對CPU的影響,并且像NVMe或SCM這樣的快速存儲可以使得網絡延遲從毫秒降低到微秒。
“在存儲網絡開始采用RDMA(特别是面向NVMe的架構,因為這似乎是将成為這個領域的标準),是為了滿足日益嚴格的大資料分析存儲性能的要求,特别是那些實時工作負載,更大的資料庫和更密集的工作負載整合。”IDC企業存儲研究總監Eric Burgener說。
他補充道,雖然NVMe協定目前還不成熟,但是他預測說:“在未來三到四年内,外部存儲平台将在協定棧NVMe方向發展,陣列背闆,控制器和結構。”
今年早些時候,英特爾公司将RDMA技術直接應用在至強伺服器的主機闆上。DataON公司正在使用新型Lightning Trac System Windows Server2016超融合系統,這些系統包括Optane固态硬碟,用于快速緩存層的NVMe,以及SMB3RDMA結構。
現在,HPE公司在其新的Store FabricM系列存儲優化交換機中使用了Mellanox基于RDMA的以太網存儲結構,為客戶提供了用于光纖通道的存儲管理工具。
同樣在今年召開的Ignite大會上,一家名為Chelsio的公司展示了運作速度為25Gbps使用RDMA網卡的SMB3的Windows Server 2016存儲副本,而光纖環路超過了50公裡(不需要用于這種城域連接配接的擴充裝置)。
在Windows10中甚至支援RMDA。好萊塢後期制作公司使用NVMe将大多數Mac工作站和六位數光纖通道SAN與Windows PC和Windows Server存儲空間直接進行替換,以便他們可以使用RDMA快速通路4K檔案以進行視訊編輯和VR的建立。
Storage Mojo公司的分析師Robin Harris表示,為了獲得高效的存儲系統,企業必須做出權衡。“采用光纖通道是有意義的,因為存儲陣列非常昂貴,共享它們需要投資支付。
如今,企業可以擁有獨立的PCIe卡,與大多數存儲陣列一樣快,并提供了更大的帶寬,而其成本隻有存儲陣列成本的一小部分。是以,在這種情況下,人們關注的重點已經從如何共享昂貴的資源轉移到如何共享廉價資源。
“鑒于成本在這種情況下的首要地位,經濟學家傾向于采用成本最低的網絡。以太網就是那個低成本的網絡嗎?是的。一旦這個協定和技術廣泛使用,我預計大多數建立的存儲網絡将将基于以太網,RDMA是提供共享基于伺服器存儲的一種經濟和低延遲解決方案的關鍵因素。
Harris表示,HPE公司的交換機采用RDMA的事實證明了該技術的可行性。他說,“從市場的角度來看,更大的問題是其他廠商是否會效仿HPE公司的做法。”
擴充光纖通道
盡管下一代架構并不是在光纖通道的基礎上發展起來的,但這并不意味着它正在消失。Harris說,“我相信光纖通道的鼎盛時期已經過去了。但是,至少在未來十年内,将有一個龐大的安裝基礎将繼續推動光纖通道市場發展。”
Burgener對此表示認同:“以太網在存儲領域的應用顯然正在興起,但根據我們對市場的收入預測,2017年光纖通道市場規模更為顯著(以太網為9.6億美元,光纖通道為117億美元)。NVMe可以通過光纖或以太網運作,我認為以太網将繼續慢慢占據光纖市場的收入,但是我們的預測2021年以太網和光纖通道的收入分别為9.8億美元和115億美元。
Burgener說,“企業資料中心往往更多地投資于光纖通道,并繼續購買,這樣他們就可以繼續利用現有的光纖通道網絡和管理專長。随着以太網的發展,越來越多的企業開始使用這種方法。”
“很少有客戶會從以太網轉向光纖通道,但人們會看到基于以太網的存儲網絡出現在已經在光纖通道上投入大量資金用于新項目或部門項目的企業中。
對于網絡成本可能過高的小型系統來說(例如,對于分支機構中的節點或其他任何希望用于邊緣計算的數TB存儲),Thunderbolt證明是RDMA的一個替代方案。英特爾Thunderbolt 3 USB-C擴充卡現已認證Windows Server 2016認證,DataON公司推出雙節點超融合存儲系統,為使用者提供40Gbps和200K IOPS,CPU占用率僅為20%,雖然不如RDMA好,但比以太網提高更多的CPU效率,其10TB的存儲成本隻有9000美元。
本文轉自d1net(轉載)