引言
InfiniBand是一種新的互連技術,它將I/O系統(tǒng)與CPU/Mem分開。克服了當前I/O結構的種種弊端,提供了高帶寬、低延遲、可擴展的I/0互連。SRP協(xié)議是Infini-Band中的一種通信協(xié)議,在InfiniBand中將SCSI命令進行打包,允許SCSI命令通過RDMA(遠程直接內存訪問)在不同的系統(tǒng)之間進行通信.實現(xiàn)存儲設備共享和RDMA通信服務。
1 SRP Target簡介
SRP Target將系統(tǒng)中的存儲設備信息映射到IB網絡上.讓SRP Initiator端的服務器能夠在IB網絡上獲取到這些SCSI存儲設備的信息,并可通過與SRP Target對存儲設備的進行訪問。
圖1為SRP Target的協(xié)議棧結構,如圖所示,與IB鏈路直接連接的是InfiniBand HCA,它與SRP Initiator端的HCA建立了RDMA通道,負責提供RDMA通信服務。SRP Target區(qū)域包括了SCSI Target、SRP Target Drive和InfiniBand Driver三個部分。
2 SRP Target的實現(xiàn)
2.1 初始化SRP Target模塊
SCSI Target的初始化是指獲取系統(tǒng)中的SCSI存儲設備信息并注冊,以使模塊具有處理SCSI命令的功能。SRPTarget的初始化關鍵是使SRP Target與SCSI Target建立聯(lián)系,使其具有處理SRP信息、進行SCSI命令的轉換、進行m管理以及提供RDMA通道服務等功能。初始化完成之后,SRP Initiator便可以獲取IB網絡上的SCSI存儲設備信息。
2.2 讀操作的實現(xiàn)
讀操作是指SRP Initiator服務器從SRP Target服務器讀取信息的過程。讀操作包括了SRP Initiator從SRP Target服務器獲取SCSI存儲設備信息、查看存儲設備容量大小,讀取存儲設備文件信息等操作。實現(xiàn)具體過程如圖2所示。
當完成數(shù)據傳輸以后。SRP Target就要對執(zhí)行過程中所占有的資源進行釋放,為下一個任務騰出資源,SRP Tar一get就處于等待接收下一個任務的狀態(tài)中。
2.3 寫操作實現(xiàn)過程
寫操作是指SRP Initiator服務器從SRP Target服務器寫信息的過程。寫操作包括了SRP Initiator服務器向SRPTarget服務器上的存儲設備寫入數(shù)據,對存儲設備進行格式化等操作。
釋放SCSI命令占有資源的操作過程與前述處理讀命令的過程是一致的。
2.4 處理異常中斷
當SRP Initiator通過RDMA通道向SRP Target發(fā)送SRP請求信息.要求RDMA通道對應的SRP Target端口接收SRP請求信息。端口執(zhí)行接收操作,但是出現(xiàn)異常中斷,接收SRP請求信息失敗,就要進行相應的處理措施.具體步驟如下:[!--empirenews.page--]
(1)SRP Target的端口檢測RDMA通道中有SRP請求信息,確認為接收完成操作失敗,未接收到SRP請求信息,立即進行操作失敗下的處理方式。
(2)釋放RDMA緩沖區(qū)相關資源,重新初始化相關屬性信息。
2.5 卸載SRPTarget
當進行卸載SRP Target時,主要進行釋放SRP Target模塊和SCSI模塊所占有資源。具體的步驟如下:
(1)注銷SCSI Target模塊中的I/O控制器,清除該控制器的設備ID號,將該控制器從全局上下文中移除。
(2)清I/O控制器所控制的SCSI命令,釋放SCSI命令所占有的內存緩沖區(qū)等資源。釋放所占有的內存緩沖區(qū)。
(3)釋放SRP Target模塊中I/O控制器所占有的資源,停止對IB端口服務人口的監(jiān)聽操作,釋放服務入口所占有的內存空間資源,并對IB端口進行更新操作,恢復端口的初始設置。
(4)對所有RDMA通道進行斷開操作.釋放RDMA通道所占有的資源。
(5)釋放IB I/O控制器所占有的空間。
3 實驗結果與分析
3.1 實驗環(huán)境
(1)硬件配置:
神威SWIBS24型IBA交換機。
IBM System x3650服務器3臺(Initiator01,Initiator02,Initiator03)各配有一塊HCA卡,作為SRP Initiator。存儲服務器一臺配置一塊HCA卡。作為SRP Target。
(2)軟件配置:
四臺linux AS4 Updata4服務器.內核版本為2.6.9-42。Initiator01、Initiator02、Initiator03安裝IBA驅動程序IBGD(InfiniBand Gold Distribution)的sRP Initiator,作為Initiator服務器;Target安裝IBA驅動程序OFED(OpenFabrics En-terprise Distribution)的SRP Target,作為Target服務器。本課題依據GPFS支持的直接連接、網絡連接兩個模式,分別對讀寫性能進行比較。
直接連接:使用SRP協(xié)議.只要求在Initiator01、02、03服務器上安裝GPFS,Target上不安裝GPFS,Initiator服務器由1B網絡通過SRP Target獲得RAID存儲設備信息,即可對其進行直接掛載、讀寫操作。
網絡連接:不使用SRP協(xié)議.使用IPoIB協(xié)議。要求在每個服務器上都安裝GPFS,Initiator服務器不能通過SRP協(xié)議獲取Target服務器上RAID存儲設備的信,g。Initiator只能通過IPoIB與Target聯(lián)系,通過Target服務器上的GPFS文件系統(tǒng)對存儲設備進行共享訪問。
3.2 實驗結果
下表為實驗結果,IPoIB為GPFS的網絡連接模式,IB-SRP為GPFS的直接連接模式:
(1)Initiator01、02、03同時對Target的RAID設備進行讀寫操作(如表1)。設置測試的空間大小為10 G,一次讀寫操作的塊大小分別為64 k,128 k,256 k,速度以K/s為單位。
(2)Initiator01對Target的RAID設備單獨進行讀寫測試(如表2)。
3.3 結果分析
實驗結果表明,在IBA網絡中使用SRP協(xié)議的Initiator和Target模塊進行數(shù)據傳輸?shù)乃俣缺葐渭兪褂肐BA網絡進行數(shù)據傳輸?shù)乃俣雀叱龊芏唷?br /> 使用SRP協(xié)議進行數(shù)據傳輸時,Initiator服務器向Tar—get服務器的RAID設備傳輸數(shù)據,是直接與Target內存進行數(shù)據傳輸,然后由Target的內存將數(shù)據傳遞給RAID設備。在此時,Target系統(tǒng)并不執(zhí)行數(shù)據的拷貝動作,不經過內核的調用,減少了處理網絡通信時在內核空間和用戶空間上下文切換的次數(shù),消除了在應用內存與內核內存之間復制數(shù)據的需要,減少了CPU的負載。繞過內核可使應用程序不必執(zhí)行內核調用就可以直接發(fā)出命令。減少了延遲時間,能騰出總線空間和CPU周期用于改進應用系統(tǒng)性能。然而只利用IBA網絡進行數(shù)據傳輸時。Target系統(tǒng)要進行數(shù)據的拷貝.內核的調用,增大了CPU的負載.性能相對下降。所以基于SRP的讀寫速度性能會更高。
4 結束語
本文介紹了實現(xiàn)SRP Target的過程.對各個獨立功能部分的工作原理、工作機制以及工作流程進行了分析。并給出了IBA存儲網絡分別使用IPOIB協(xié)議和SRP協(xié)議讀寫性能的測試結果,對于設計實現(xiàn)基于IBA的存儲網絡有著重要的參考價值。
要問機器人公司哪家強,波士頓動力絕對是其中的佼佼者。近來年該公司在機器人研發(fā)方面獲得的一些成果令人印象深刻,比如其開發(fā)的機器人會后空翻,自主爬樓梯等。這不,波士頓動力又發(fā)布了其機器人組團跳男團舞的新視頻,表演的機器人包括...
關鍵字: 機器人 BSP 工業(yè)機器人 現(xiàn)代汽車