簡(jiǎn)談以太網(wǎng)RDMA網(wǎng)卡的應(yīng)用

時(shí)間：2020-03-25作者：深圳市聯(lián)瑞電子有限公司瀏覽：36

各式各樣的數(shù)據(jù)在網(wǎng)絡(luò)介質(zhì)中通過(guò)網(wǎng)絡(luò)協(xié)議(如TCP/IP)進(jìn)行傳輸時(shí)，如果信息量過(guò)大而不加以限制的話，那么**額的網(wǎng)絡(luò)流量就會(huì)導(dǎo)致設(shè)備反應(yīng)緩慢，由此就造成了網(wǎng)絡(luò)延遲。

延遲越低越好，效率越高越好，這不僅僅是數(shù)據(jù)中心網(wǎng)絡(luò)的要求，我們平常使用的內(nèi)部網(wǎng)絡(luò)同樣也希望如此。當(dāng)前的網(wǎng)絡(luò)速度有萬(wàn)兆、2.5萬(wàn)兆、4萬(wàn)兆，甚至10萬(wàn)兆、20萬(wàn)兆……的趨勢(shì)都已經(jīng)來(lái)了，網(wǎng)絡(luò)帶寬似乎已經(jīng)不是主要的瓶頸了，而服務(wù)器系統(tǒng)和CPU本身逐步轉(zhuǎn)為了制約網(wǎng)絡(luò)I/O的瓶頸，影響服務(wù)器的整體性能。


1. 如何解決問(wèn)題？
解決問(wèn)題的基本思路就是：通過(guò)應(yīng)用程序直接讀取和寫(xiě)入遠(yuǎn)程內(nèi)存，而*CPU介入進(jìn)行多次拷貝內(nèi)存，還可繞過(guò)內(nèi)核直接向網(wǎng)卡寫(xiě)數(shù)據(jù)，實(shí)現(xiàn)了高吞吐量、**低時(shí)延和低CPU開(kāi)銷(xiāo)的效果。
實(shí)現(xiàn)這樣功能的技術(shù)就是RDMA（Remote Direct Memory Access）技術(shù)，也就把RDMA【遠(yuǎn)程直接數(shù)據(jù)存取】技術(shù)運(yùn)用到了網(wǎng)卡控制器上。

那么具有RDMA功能的網(wǎng)卡和不具有RDMA網(wǎng)卡的有什么不同呢？
首先不具備RDMA功能的網(wǎng)卡的傳輸路徑過(guò)程是：應(yīng)用程序--->系統(tǒng)--->內(nèi)存--->CPU--->內(nèi)存--->硬盤(pán)---->內(nèi)存--->網(wǎng)卡。
而具有RDMA功能的網(wǎng)卡，在進(jìn)行數(shù)據(jù)傳輸時(shí)候，網(wǎng)卡繞過(guò)CPU來(lái)實(shí)現(xiàn)服務(wù)器間的內(nèi)存數(shù)據(jù)交換：應(yīng)用程序--->內(nèi)存--->硬盤(pán)---->內(nèi)存--->網(wǎng)卡。大大地簡(jiǎn)化了過(guò)程，傳輸效率有了明顯的提升。

 

具有RDMA功能的網(wǎng)絡(luò)和不具有RDMA功能的網(wǎng)絡(luò)工作示意【圖片來(lái)自網(wǎng)絡(luò)】
（綠色表示RDMA的工作路徑，橙色表示不具有RDMA功能的工作路徑）

RDMA作為一種硬件實(shí)現(xiàn)的網(wǎng)絡(luò)傳輸技術(shù)，可以大幅提升網(wǎng)絡(luò)傳輸實(shí)效，幫助網(wǎng)絡(luò)IO密集的業(yè)務(wù)（比如分布式存儲(chǔ)、分布式數(shù)據(jù)庫(kù)等）獲得較低的時(shí)延以及較高的吞吐。
目前市場(chǎng)上能夠支持RDMA功能的網(wǎng)卡產(chǎn)品并不普及，如我們熟知的Intel網(wǎng)卡，也只在X722-da2/da4上加入了單一的iWARP功能。
而由深圳市聯(lián)瑞電子有限公司推出的三款國(guó)產(chǎn)萬(wàn)兆光纖網(wǎng)卡：聯(lián)瑞LRES1004PF-2SFP+、聯(lián)瑞LRES1005PF-4SFP+、聯(lián)瑞LRES1009PF-SFP+均具有RoCE和iWARP的RDMA功能，同時(shí)成為國(guó)內(nèi)首批具有RDMA功能的國(guó)產(chǎn)網(wǎng)卡之一。接下來(lái)還會(huì)有25G的支持RDMA的光纖網(wǎng)卡上市，我們拭目以待。

 
2. RDMA的應(yīng)用
（1）在服務(wù)器群集上應(yīng)用
RDMA用來(lái)把小型服務(wù)器連接為一個(gè)群集；可以處理一些十幾顆處理器的**服務(wù)器才能夠處理的大型數(shù)據(jù)庫(kù)。
（2）在高速集群和服務(wù)器區(qū)域網(wǎng)上應(yīng)用
采用RDMA來(lái)獲取高性能的協(xié)議，包括SDP（Sockets Direct Protocol）、SRP（SCSI RDMA Protocol）和DAFS（Direct Access File System）；
（3）在分布式應(yīng)用程序的集群上應(yīng)用
采用RDMA的通信庫(kù)，包括DAPL（Direct Access Provider Library）、MPI（Message Passing Interface）和VIPL（Virtual Interface Provider Library），運(yùn)行在分布式應(yīng)用程序的集群是RDMA 能夠大顯身手的領(lǐng)域之一；
通過(guò)DAPL或VIPL以及集群上運(yùn)行的數(shù)據(jù)庫(kù)軟件來(lái)使用RDMA，可在相同的節(jié)點(diǎn)數(shù)目下獲得較高的性能和較好的延展性。使用MPI的集群科技運(yùn)算應(yīng)用程序，通過(guò)支持互連RDMA 實(shí)現(xiàn)了低延遲時(shí)間低開(kāi)銷(xiāo)和高吞吐量，這一結(jié)果也使它獲得了巨大的性能提升其他初期的RDMA 應(yīng)用；
iWARP/RDMA這類(lèi)技術(shù)是通過(guò)DAFS的遠(yuǎn)程文件服務(wù)器訪問(wèn)、通過(guò)SRP的存儲(chǔ)設(shè)備訪問(wèn)RDMA技術(shù)成為高速集群系統(tǒng)和存儲(chǔ)域網(wǎng)絡(luò)的基本特征技術(shù)。
還有用于RDMA的iSCSI擴(kuò)展的iSER，充分利用了RDMA的功能。
RDMA的其他早期應(yīng)用還有通過(guò)DAFS的遠(yuǎn)程文件服務(wù)器訪問(wèn)和通過(guò)SRP的刀片服務(wù)器存儲(chǔ)訪問(wèn)。
（4）在NAS和SAN上應(yīng)用
傳統(tǒng)的直連存儲(chǔ)DAS是以服務(wù)器為中心的存儲(chǔ)結(jié)構(gòu)，這一存儲(chǔ)體系結(jié)構(gòu)存在容量限制、連接距離有限、不易于共享和管理等不可克服的缺點(diǎn)。已經(jīng)不能夠滿足網(wǎng)絡(luò)時(shí)代的應(yīng)用需求，
存儲(chǔ)技術(shù)發(fā)生巨大變化出現(xiàn)了，出現(xiàn)了如：網(wǎng)絡(luò)附加存儲(chǔ)NAS、存儲(chǔ)區(qū)域網(wǎng)絡(luò)SAN。這些既能為網(wǎng)絡(luò)上的應(yīng)用系統(tǒng)提供豐富快速簡(jiǎn)便的存儲(chǔ)資源，又能共享存儲(chǔ)資源并對(duì)其實(shí)施集中管理，成為當(dāng)前理想的存儲(chǔ)管理和應(yīng)用模式，
但NAS結(jié)構(gòu)存在一些難以解決的問(wèn)題如：傳輸能力有限、可擴(kuò)展性有限、數(shù)據(jù)備份能力有限、并且不能對(duì)數(shù)據(jù)庫(kù)服務(wù)提供有效的支持。
DAFS把RDMA的優(yōu)點(diǎn)和NAS的存儲(chǔ)能力集成在一起，全部的讀寫(xiě)操作都直接通過(guò)RDMA驅(qū)動(dòng)器執(zhí)行，從而降低了網(wǎng)絡(luò)文件協(xié)議所帶來(lái)的系統(tǒng)負(fù)載，今后的NAS存儲(chǔ)系統(tǒng)將會(huì)采用DAFS技術(shù)來(lái)提高系統(tǒng)性能，并且在性能和價(jià)格上與SAN 存儲(chǔ)系統(tǒng)進(jìn)行有力的競(jìng)爭(zhēng)。
（5）在高性能數(shù)據(jù)中心上應(yīng)用
數(shù)據(jù)中心、AI訓(xùn)練、云存儲(chǔ)等


深圳市聯(lián)瑞電子有限公司專注于以太網(wǎng)網(wǎng)卡,工業(yè)以太網(wǎng),機(jī)器視覺(jué)等

• 詞條

  詞條說(shuō)明

• 百G以太網(wǎng)開(kāi)啟網(wǎng)絡(luò)**高速時(shí)代

  隨著以太網(wǎng)技術(shù)在網(wǎng)絡(luò)構(gòu)建中的迅速普及，以太網(wǎng)平臺(tái)已經(jīng)成為網(wǎng)絡(luò)組建中的主流技術(shù)平臺(tái)。 帶寬流量數(shù)據(jù)的壓力是互聯(lián)網(wǎng)網(wǎng)絡(luò)的**問(wèn)題之一。隨著互聯(lián)網(wǎng)網(wǎng)絡(luò)用戶數(shù)量的迅猛的增長(zhǎng)，網(wǎng)絡(luò)規(guī)模也在迅速擴(kuò)大；另外數(shù)據(jù)中心、云計(jì)算、邊緣計(jì)算、短視頻和視頻直播、物聯(lián)網(wǎng)、工業(yè)網(wǎng)絡(luò)的提升、智能城市的建設(shè)、互聯(lián)網(wǎng)基建、網(wǎng)絡(luò)安全、以及WiFi、5G移動(dòng)網(wǎng)絡(luò)等有線、無(wú)線寬帶互聯(lián)網(wǎng)業(yè)務(wù)日趨劇增的復(fù)雜需求，**級(jí)大型的海量存儲(chǔ)和**高速

• 解讀國(guó)產(chǎn)以太網(wǎng)卡虛擬化應(yīng)用

  今天小編說(shuō)說(shuō)虛擬化！什么是虛擬化呢？ 它是指通過(guò)虛擬化技術(shù)將一臺(tái)計(jì)算機(jī)虛擬為多臺(tái)邏輯計(jì)算機(jī)。（就如1棟大樓并不是一個(gè)企業(yè)在里面，而是由N多家各行各業(yè)的企業(yè)在里面辦公） 在一臺(tái)計(jì)算機(jī)上同時(shí)運(yùn)行多個(gè)虛擬的邏輯計(jì)算機(jī)，每個(gè)虛擬的邏輯計(jì)算機(jī)可運(yùn)行不同的操作系統(tǒng)，并且應(yīng)用程序都在相互獨(dú)立的空間內(nèi)運(yùn)行而互不影響，從而顯著提高計(jì)算機(jī)的工作效率（即計(jì)算機(jī)的硬件效率）。 虛擬化使用軟件的方法重新定義劃分IT資源，

• **國(guó)產(chǎn)萬(wàn)兆10G芯片雙口光纖OCP Type-1結(jié)構(gòu)網(wǎng)卡

  夾層卡（Mezzanine Card）是一種為嵌入式體系添加特定效能且有效的普遍應(yīng)用方法。因夾層卡也是一種外圍設(shè)備卡，是通過(guò)連接主載板上擴(kuò)展系統(tǒng)的功能，而不是徑直插在連接背板上，因此夾層卡可以自在變換，同時(shí)對(duì)設(shè)計(jì)人員來(lái)說(shuō)，這也意味著既能行靈巧配備，又可以自在晉級(jí)。夾層卡采用薄型連接器平行于母板的安裝方式，把所需的拓展功能安裝到母板上，只占用一個(gè)空間狹小的插槽。 因?yàn)樘厥獾男螤詈椭С质沟谜加每臻g小的

• 用于大數(shù)據(jù)存儲(chǔ)：國(guó)產(chǎn)10G光纖網(wǎng)卡

  目前，5G網(wǎng)絡(luò)、人工智能、工業(yè)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)為代表的“新基建”大力推動(dòng)實(shí)施，企業(yè)用戶、個(gè)人用戶以及整個(gè)社會(huì)體系應(yīng)用所產(chǎn)生的數(shù)據(jù)再次呈井噴式爆發(fā)，然而，傳統(tǒng)網(wǎng)絡(luò)、存儲(chǔ)方法卻難以滿足如此繁多且高速的數(shù)據(jù)處理、存儲(chǔ)需求。 據(jù)預(yù)計(jì)，**數(shù)據(jù)中心總流量將由2016年的6819EB增至2021年的20555EB，而**的存儲(chǔ)數(shù)據(jù)總量在2020年將達(dá)到44個(gè)ZB（IDC，2018年），而且實(shí)際的數(shù)量必然比保守