日本黄色一级经典视频|伊人久久精品视频|亚洲黄色色周成人视频九九九|av免费网址黄色小短片|黄色Av无码亚洲成年人|亚洲1区2区3区无码|真人黄片免费观看|无码一级小说欧美日免费三级|日韩中文字幕91在线看|精品久久久无码中文字幕边打电话

當(dāng)前位置:首頁 > 嵌入式 > 嵌入式教程
[導(dǎo)讀]緩存和RAID如何提高IO

從上一篇文章:IO系統(tǒng)性能之一:衡量性能的幾個指標(biāo)的計算中我們可以看到一個15k轉(zhuǎn)速的磁盤在隨機讀寫訪問的情況下IOPS竟然只有140左右,但在實際應(yīng)用中我們卻能看到很多標(biāo)有5000IOPS甚至更高的存儲系統(tǒng),有這么大IOPS的存儲系統(tǒng)怎么來的呢?這就要歸結(jié)于各種存儲技術(shù)的使用了,在這些存儲技術(shù)中使用最廣的就是高速緩存(Cache)和磁盤冗余陣列(RAID)了,本文就將探討緩存和磁盤陣列提高存儲IO性能的方法。

  高速緩存(Cache)

  在當(dāng)下的各種存儲產(chǎn)品中,按照速度從快到慢應(yīng)該就是內(nèi)存>閃存>磁盤>磁帶了,然而速度越快也就意味著價格越高,閃存雖然說是發(fā)展勢頭很好,但目前來說卻還是因為價格問題無法普及,因此現(xiàn)在還是一個磁盤作霸王的時代。與CPU和內(nèi)存速度相比,磁盤的速度無疑是計算機系統(tǒng)中最大的瓶頸了,所以在必須使用磁盤而又想提高性能的情況下,人們想出了在磁盤中嵌入一塊高速的內(nèi)存用來保存經(jīng)常訪問的數(shù)據(jù)從而提高讀寫效率的方法來折中的解決,這塊嵌入的內(nèi)存就被稱為高速緩存。

  說到緩存,這東西應(yīng)用現(xiàn)在已經(jīng)是無處不在,從處于上層的應(yīng)用,到操作系統(tǒng)層,再到磁盤控制器,還有CPU內(nèi)部,單個磁盤的內(nèi)部也都存在緩存,所有這些緩存存在的目的都是相同的,就是提高系統(tǒng)執(zhí)行的效率。

  當(dāng)然在這里我們只關(guān)心跟IO性能相關(guān)的緩存,與IO性能直接相關(guān)的幾個緩存分別是文件系統(tǒng)緩存(File System Cache)、磁盤控制器緩存(Disk Controller Cache)和磁盤緩存(Disk Cache,也稱為Disk Buffer),不過當(dāng)在計算一個磁盤系統(tǒng)性能的時候文件系統(tǒng)緩存也是不會考慮在內(nèi)的,因此我們重點考察的就是磁盤控制器緩存和磁盤緩存。

  不管是控制器緩存還是磁盤緩存,他們所起的作用主要是分為三部分:緩存數(shù)據(jù)、預(yù)讀(Read-ahead)和回寫(Write-back)。

  緩存數(shù)據(jù)

  首先是系統(tǒng)讀取過的數(shù)據(jù)會被緩存在高速緩存中,這樣下次再次需要讀取相同的數(shù)據(jù)的時候就不用在訪問磁盤,直接從緩存中取數(shù)據(jù)就可以了。當(dāng)然使用過的數(shù)據(jù)也不可能在緩存中永久保留的,緩存的數(shù)據(jù)一般那是采取LRU算法來進行管理,目的是將長時間不用的數(shù)據(jù)清除出緩存,那些經(jīng)常被訪問的卻能一直保留在緩存中,直到緩存被清空。

  預(yù)讀

  預(yù)讀是指采用預(yù)讀算法在沒有系統(tǒng)的IO請求的時候事先將數(shù)據(jù)從磁盤中讀入到緩存中,然后在系統(tǒng)發(fā)出讀IO請求的時候,就會實現(xiàn)去檢查看看緩存里面是否存在要讀取的數(shù)據(jù),如果存在(即命中)的話就直接將結(jié)果返回,這時候的磁盤不再需要尋址、旋轉(zhuǎn)等待、讀取數(shù)據(jù)這一序列的操作了,這樣是能節(jié)省很多時間的;如果沒有命中則再發(fā)出真正的讀取磁盤的命令去取所需要的數(shù)據(jù)。

  緩存的命中率跟緩存的大小有很大的關(guān)系,理論上是緩存越大的話,所能緩存的數(shù)據(jù)也就越多,這樣命中率也自然越高,當(dāng)然緩存不可能太大,畢竟成本在那兒呢。如果一個容量很大的存儲系統(tǒng)配備了一個很小的讀緩存的話,這時候問題會比較大的,因為小緩存緩存的數(shù)據(jù)量非常小,相比整個存儲系統(tǒng)來說比例非常低,這樣隨機讀取(數(shù)據(jù)庫系統(tǒng)的大多數(shù)情況)的時候命中率也自然就很低,這樣的緩存不但不能提高效率(因為絕大部分讀IO都還要讀取磁盤),反而會因為每次去匹配緩存而浪費時間。

  執(zhí)行讀IO操作是讀取數(shù)據(jù)存在于緩存中的數(shù)量與全部要讀取數(shù)據(jù)的比值稱為緩存命中率(Read Cache Hit Radio),假設(shè)一個存儲系統(tǒng)在不使用緩存的情況下隨機小IO讀取能達到150IOPS,而它的緩存能提供10%的緩存命中率的話,那么實際上它的IOPS可以達到150/(1-10%)=166。

  回寫

  首先說一下,用于回寫功能的那部分緩存被稱為寫緩存(Write Cache)。在一套寫緩存打開的存儲中,操作系統(tǒng)所發(fā)出的一系列寫IO命令并不會被挨個的執(zhí)行,這些寫IO的命令會先寫入緩存中,然后再一次性的將緩存中的修改推到磁盤中,這就相當(dāng)于將那些相同的多個IO合并成一個,多個連續(xù)操作的小IO合并成一個大的IO,還有就是將多個隨機的寫IO變成一組連續(xù)的寫IO,這樣就能減少磁盤尋址等操作所消耗的時間,大大的提高磁盤寫入的效率。

  讀緩存雖然對效率提高是很明顯的,但是它所帶來的問題也比較嚴重,因為緩存和普通內(nèi)存一樣,掉點以后數(shù)據(jù)會全部丟失,當(dāng)操作系統(tǒng)發(fā)出的寫IO命令寫入到緩存中后即被認為是寫入成功,而實際上數(shù)據(jù)是沒有被真正寫入磁盤的,此時如果掉電,緩存中的數(shù)據(jù)就會永遠的丟失了,這個對應(yīng)用來說是災(zāi)難性的,目前解決這個問題最好的方法就是給緩存配備電池了,保證存儲掉電之后緩存數(shù)據(jù)能如數(shù)保存下來。

  和讀一樣,寫緩存也存在一個寫緩存命中率(Write Cache Hit Radio),不過和讀緩存命中情況不一樣的是,盡管緩存命中,也不能將實際的IO操作免掉,只是被合并了而已。

  控制器緩存和磁盤緩存除了上面的作用之外還承當(dāng)著其他的作用,比如磁盤緩存有保存IO命令隊列的功能,單個的磁盤一次只能處理一個IO命令,但卻能接收多個IO命令,這些進入到磁盤而未被處理的命令就保存在緩存中的IO隊列中。

  RAID(Redundant Array Of Inexpensive Disks)

  如果你是一位數(shù)據(jù)庫管理員或者經(jīng)常接觸服務(wù)器,那對RAID應(yīng)該很熟悉了,作為最廉價的存儲解決方案,RAID早已在服務(wù)器存儲中得到了普及。在RAID的各個級別中,應(yīng)當(dāng)以RAID10和RAID5(不過RAID5已經(jīng)基本走到頭了,RAID6正在崛起中,看看這里了解下原因)應(yīng)用最廣了。下面將就RAID0,RAID1,RAID5,RAID6,RAID10這幾種級別的RAID展開說一下磁盤陣列對于磁盤性能的影響,當(dāng)然在閱讀下面的內(nèi)容之前你必須對各個級別的RAID的結(jié)構(gòu)和工作原理要熟悉才行,這樣才不至于滿頭霧水,推薦查看wikipedia上面的如下條目:RAID,Standard RAID levels,Nested RAID levels。

  RAID0

  RAID0將數(shù)據(jù)條帶化(striping)將連續(xù)的數(shù)據(jù)分散在多個磁盤上進行存取,系統(tǒng)發(fā)出的IO命令(不管讀IO和寫IO都一樣)就可以在磁盤上被并行的執(zhí)行,每個磁盤單獨執(zhí)行自己的那一部分請求,這樣的并行的IO操作能大大的增強整個存儲系統(tǒng)的性能。假設(shè)一個RAID0陣列有n(n>=2)個磁盤組成,每個磁盤的隨機讀寫的IO能力都達到140的話,那么整個磁盤陣列的IO能力將是140*n。同時如果在陣列總線的傳輸能力允許的話RAID0的吞吐率也將是單個磁盤的n倍。

   [!--empirenews.page--]

從上一篇文章:IO系統(tǒng)性能之一:衡量性能的幾個指標(biāo)的計算中我們可以看到一個15k轉(zhuǎn)速的磁盤在隨機讀寫訪問的情況下IOPS竟然只有140左右,但在實際應(yīng)用中我們卻能看到很多標(biāo)有5000IOPS甚至更高的存儲系統(tǒng),有這么大IOPS的存儲系統(tǒng)怎么來的呢?這就要歸結(jié)于各種存儲技術(shù)的使用了,在這些存儲技術(shù)中使用最廣的就是高速緩存(Cache)和磁盤冗余陣列(RAID)了,本文就將探討緩存和磁盤陣列提高存儲IO性能的方法。

  高速緩存(Cache)

  在當(dāng)下的各種存儲產(chǎn)品中,按照速度從快到慢應(yīng)該就是內(nèi)存>閃存>磁盤>磁帶了,然而速度越快也就意味著價格越高,閃存雖然說是發(fā)展勢頭很好,但目前來說卻還是因為價格問題無法普及,因此現(xiàn)在還是一個磁盤作霸王的時代。與CPU和內(nèi)存速度相比,磁盤的速度無疑是計算機系統(tǒng)中最大的瓶頸了,所以在必須使用磁盤而又想提高性能的情況下,人們想出了在磁盤中嵌入一塊高速的內(nèi)存用來保存經(jīng)常訪問的數(shù)據(jù)從而提高讀寫效率的方法來折中的解決,這塊嵌入的內(nèi)存就被稱為高速緩存。

  說到緩存,這東西應(yīng)用現(xiàn)在已經(jīng)是無處不在,從處于上層的應(yīng)用,到操作系統(tǒng)層,再到磁盤控制器,還有CPU內(nèi)部,單個磁盤的內(nèi)部也都存在緩存,所有這些緩存存在的目的都是相同的,就是提高系統(tǒng)執(zhí)行的效率。

  當(dāng)然在這里我們只關(guān)心跟IO性能相關(guān)的緩存,與IO性能直接相關(guān)的幾個緩存分別是文件系統(tǒng)緩存(File System Cache)、磁盤控制器緩存(Disk Controller Cache)和磁盤緩存(Disk Cache,也稱為Disk Buffer),不過當(dāng)在計算一個磁盤系統(tǒng)性能的時候文件系統(tǒng)緩存也是不會考慮在內(nèi)的,因此我們重點考察的就是磁盤控制器緩存和磁盤緩存。

  不管是控制器緩存還是磁盤緩存,他們所起的作用主要是分為三部分:緩存數(shù)據(jù)、預(yù)讀(Read-ahead)和回寫(Write-back)。

  緩存數(shù)據(jù)

  首先是系統(tǒng)讀取過的數(shù)據(jù)會被緩存在高速緩存中,這樣下次再次需要讀取相同的數(shù)據(jù)的時候就不用在訪問磁盤,直接從緩存中取數(shù)據(jù)就可以了。當(dāng)然使用過的數(shù)據(jù)也不可能在緩存中永久保留的,緩存的數(shù)據(jù)一般那是采取LRU算法來進行管理,目的是將長時間不用的數(shù)據(jù)清除出緩存,那些經(jīng)常被訪問的卻能一直保留在緩存中,直到緩存被清空。

  預(yù)讀

  預(yù)讀是指采用預(yù)讀算法在沒有系統(tǒng)的IO請求的時候事先將數(shù)據(jù)從磁盤中讀入到緩存中,然后在系統(tǒng)發(fā)出讀IO請求的時候,就會實現(xiàn)去檢查看看緩存里面是否存在要讀取的數(shù)據(jù),如果存在(即命中)的話就直接將結(jié)果返回,這時候的磁盤不再需要尋址、旋轉(zhuǎn)等待、讀取數(shù)據(jù)這一序列的操作了,這樣是能節(jié)省很多時間的;如果沒有命中則再發(fā)出真正的讀取磁盤的命令去取所需要的數(shù)據(jù)。

  緩存的命中率跟緩存的大小有很大的關(guān)系,理論上是緩存越大的話,所能緩存的數(shù)據(jù)也就越多,這樣命中率也自然越高,當(dāng)然緩存不可能太大,畢竟成本在那兒呢。如果一個容量很大的存儲系統(tǒng)配備了一個很小的讀緩存的話,這時候問題會比較大的,因為小緩存緩存的數(shù)據(jù)量非常小,相比整個存儲系統(tǒng)來說比例非常低,這樣隨機讀取(數(shù)據(jù)庫系統(tǒng)的大多數(shù)情況)的時候命中率也自然就很低,這樣的緩存不但不能提高效率(因為絕大部分讀IO都還要讀取磁盤),反而會因為每次去匹配緩存而浪費時間。

  執(zhí)行讀IO操作是讀取數(shù)據(jù)存在于緩存中的數(shù)量與全部要讀取數(shù)據(jù)的比值稱為緩存命中率(Read Cache Hit Radio),假設(shè)一個存儲系統(tǒng)在不使用緩存的情況下隨機小IO讀取能達到150IOPS,而它的緩存能提供10%的緩存命中率的話,那么實際上它的IOPS可以達到150/(1-10%)=166。

  回寫

  首先說一下,用于回寫功能的那部分緩存被稱為寫緩存(Write Cache)。在一套寫緩存打開的存儲中,操作系統(tǒng)所發(fā)出的一系列寫IO命令并不會被挨個的執(zhí)行,這些寫IO的命令會先寫入緩存中,然后再一次性的將緩存中的修改推到磁盤中,這就相當(dāng)于將那些相同的多個IO合并成一個,多個連續(xù)操作的小IO合并成一個大的IO,還有就是將多個隨機的寫IO變成一組連續(xù)的寫IO,這樣就能減少磁盤尋址等操作所消耗的時間,大大的提高磁盤寫入的效率。

  讀緩存雖然對效率提高是很明顯的,但是它所帶來的問題也比較嚴重,因為緩存和普通內(nèi)存一樣,掉點以后數(shù)據(jù)會全部丟失,當(dāng)操作系統(tǒng)發(fā)出的寫IO命令寫入到緩存中后即被認為是寫入成功,而實際上數(shù)據(jù)是沒有被真正寫入磁盤的,此時如果掉電,緩存中的數(shù)據(jù)就會永遠的丟失了,這個對應(yīng)用來說是災(zāi)難性的,目前解決這個問題最好的方法就是給緩存配備電池了,保證存儲掉電之后緩存數(shù)據(jù)能如數(shù)保存下來。

  和讀一樣,寫緩存也存在一個寫緩存命中率(Write Cache Hit Radio),不過和讀緩存命中情況不一樣的是,盡管緩存命中,也不能將實際的IO操作免掉,只是被合并了而已。

  控制器緩存和磁盤緩存除了上面的作用之外還承當(dāng)著其他的作用,比如磁盤緩存有保存IO命令隊列的功能,單個的磁盤一次只能處理一個IO命令,但卻能接收多個IO命令,這些進入到磁盤而未被處理的命令就保存在緩存中的IO隊列中。

  RAID(Redundant Array Of Inexpensive Disks)

  如果你是一位數(shù)據(jù)庫管理員或者經(jīng)常接觸服務(wù)器,那對RAID應(yīng)該很熟悉了,作為最廉價的存儲解決方案,RAID早已在服務(wù)器存儲中得到了普及。在RAID的各個級別中,應(yīng)當(dāng)以RAID10和RAID5(不過RAID5已經(jīng)基本走到頭了,RAID6正在崛起中,看看這里了解下原因)應(yīng)用最廣了。下面將就RAID0,RAID1,RAID5,RAID6,RAID10這幾種級別的RAID展開說一下磁盤陣列對于磁盤性能的影響,當(dāng)然在閱讀下面的內(nèi)容之前你必須對各個級別的RAID的結(jié)構(gòu)和工作原理要熟悉才行,這樣才不至于滿頭霧水,推薦查看wikipedia上面的如下條目:RAID,Standard RAID levels,Nested RAID levels。

  RAID0

  RAID0將數(shù)據(jù)條帶化(striping)將連續(xù)的數(shù)據(jù)分散在多個磁盤上進行存取,系統(tǒng)發(fā)出的IO命令(不管讀IO和寫IO都一樣)就可以在磁盤上被并行的執(zhí)行,每個磁盤單獨執(zhí)行自己的那一部分請求,這樣的并行的IO操作能大大的增強整個存儲系統(tǒng)的性能。假設(shè)一個RAID0陣列有n(n>=2)個磁盤組成,每個磁盤的隨機讀寫的IO能力都達到140的話,那么整個磁盤陣列的IO能力將是140*n。同時如果在陣列總線的傳輸能力允許的話RAID0的吞吐率也將是單個磁盤的n倍。

  

本站聲明: 本文章由作者或相關(guān)機構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點,本站亦不保證或承諾內(nèi)容真實性等。需要轉(zhuǎn)載請聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請及時聯(lián)系本站刪除。
換一批
延伸閱讀

LED驅(qū)動電源的輸入包括高壓工頻交流(即市電)、低壓直流、高壓直流、低壓高頻交流(如電子變壓器的輸出)等。

關(guān)鍵字: 驅(qū)動電源

在工業(yè)自動化蓬勃發(fā)展的當(dāng)下,工業(yè)電機作為核心動力設(shè)備,其驅(qū)動電源的性能直接關(guān)系到整個系統(tǒng)的穩(wěn)定性和可靠性。其中,反電動勢抑制與過流保護是驅(qū)動電源設(shè)計中至關(guān)重要的兩個環(huán)節(jié),集成化方案的設(shè)計成為提升電機驅(qū)動性能的關(guān)鍵。

關(guān)鍵字: 工業(yè)電機 驅(qū)動電源

LED 驅(qū)動電源作為 LED 照明系統(tǒng)的 “心臟”,其穩(wěn)定性直接決定了整個照明設(shè)備的使用壽命。然而,在實際應(yīng)用中,LED 驅(qū)動電源易損壞的問題卻十分常見,不僅增加了維護成本,還影響了用戶體驗。要解決這一問題,需從設(shè)計、生...

關(guān)鍵字: 驅(qū)動電源 照明系統(tǒng) 散熱

根據(jù)LED驅(qū)動電源的公式,電感內(nèi)電流波動大小和電感值成反比,輸出紋波和輸出電容值成反比。所以加大電感值和輸出電容值可以減小紋波。

關(guān)鍵字: LED 設(shè)計 驅(qū)動電源

電動汽車(EV)作為新能源汽車的重要代表,正逐漸成為全球汽車產(chǎn)業(yè)的重要發(fā)展方向。電動汽車的核心技術(shù)之一是電機驅(qū)動控制系統(tǒng),而絕緣柵雙極型晶體管(IGBT)作為電機驅(qū)動系統(tǒng)中的關(guān)鍵元件,其性能直接影響到電動汽車的動力性能和...

關(guān)鍵字: 電動汽車 新能源 驅(qū)動電源

在現(xiàn)代城市建設(shè)中,街道及停車場照明作為基礎(chǔ)設(shè)施的重要組成部分,其質(zhì)量和效率直接關(guān)系到城市的公共安全、居民生活質(zhì)量和能源利用效率。隨著科技的進步,高亮度白光發(fā)光二極管(LED)因其獨特的優(yōu)勢逐漸取代傳統(tǒng)光源,成為大功率區(qū)域...

關(guān)鍵字: 發(fā)光二極管 驅(qū)動電源 LED

LED通用照明設(shè)計工程師會遇到許多挑戰(zhàn),如功率密度、功率因數(shù)校正(PFC)、空間受限和可靠性等。

關(guān)鍵字: LED 驅(qū)動電源 功率因數(shù)校正

在LED照明技術(shù)日益普及的今天,LED驅(qū)動電源的電磁干擾(EMI)問題成為了一個不可忽視的挑戰(zhàn)。電磁干擾不僅會影響LED燈具的正常工作,還可能對周圍電子設(shè)備造成不利影響,甚至引發(fā)系統(tǒng)故障。因此,采取有效的硬件措施來解決L...

關(guān)鍵字: LED照明技術(shù) 電磁干擾 驅(qū)動電源

開關(guān)電源具有效率高的特性,而且開關(guān)電源的變壓器體積比串聯(lián)穩(wěn)壓型電源的要小得多,電源電路比較整潔,整機重量也有所下降,所以,現(xiàn)在的LED驅(qū)動電源

關(guān)鍵字: LED 驅(qū)動電源 開關(guān)電源

LED驅(qū)動電源是把電源供應(yīng)轉(zhuǎn)換為特定的電壓電流以驅(qū)動LED發(fā)光的電壓轉(zhuǎn)換器,通常情況下:LED驅(qū)動電源的輸入包括高壓工頻交流(即市電)、低壓直流、高壓直流、低壓高頻交流(如電子變壓器的輸出)等。

關(guān)鍵字: LED 隧道燈 驅(qū)動電源
關(guān)閉