基于負(fù)載感知的存儲系統(tǒng)及設(shè)備自適應(yīng)多維屬性優(yōu)化.pdf

1、對當(dāng)前的存儲系統(tǒng)及設(shè)備，能耗和實際應(yīng)用程序的性能逐漸超越簡單的硬件特性成為重要性能評估指標(biāo)之一。這主要表現(xiàn)在兩個方面。其一，隨著硬件和電力開銷的上升，系統(tǒng)及設(shè)備的功耗和可靠性越來越成為一個重要的衡量指標(biāo)。因此，節(jié)能型存儲系統(tǒng)近年來受到廣泛關(guān)注。其二，由于系統(tǒng)和應(yīng)用的復(fù)雜性增加，對系統(tǒng)及設(shè)備的性能評價逐漸由單純的器件級性能評價體系變?yōu)榛趹?yīng)用的性能評價方法。例如，固態(tài)盤設(shè)備理想情況下可以達(dá)到低于20us的延遲，但是因為各層存儲軟件的開銷相

2、對增加，導(dǎo)致應(yīng)用程序通常僅能獲得其不足50％的性能，器件性能并不能被應(yīng)用程序充分利用。本文對存儲系統(tǒng)從以上兩個方面進(jìn)行了多維屬性的研究。
　　近年來，存儲系統(tǒng)及設(shè)備的功耗模型和節(jié)能方案已有大量的研究成果。然而相關(guān)存儲系統(tǒng)及設(shè)備的溫度模型，以及功耗和溫度之間的關(guān)系卻少有研究。有統(tǒng)計數(shù)據(jù)表明，存儲設(shè)備的溫度對其壽命及錯誤率有重要影響，從而也影響著系統(tǒng)的可靠性。由于主要的節(jié)能存儲系統(tǒng)，如MAID及PARAID，均采用把I/O負(fù)載集中在少

3、數(shù)硬盤上的策略，使得數(shù)據(jù)中心的溫度不能均勻分布。這樣既增加了制冷的難度也影響了系統(tǒng)可靠性。為了研究存儲系統(tǒng)中溫度和功耗的關(guān)系，本文搭建了大規(guī)模硬盤溫度測量平臺對單個硬盤設(shè)備進(jìn)行在線的實時監(jiān)測，并建立和驗證了在線溫度預(yù)測模型，完成了對硬盤溫度的突變、過度和動態(tài)平衡等過程的準(zhǔn)確預(yù)測。
　　針對節(jié)能型存儲系統(tǒng)中，局部高負(fù)載硬盤設(shè)備的溫度過熱問題，提出通過增加溫度負(fù)反饋對存儲系統(tǒng)進(jìn)行溫度限制的方法。通過改進(jìn)節(jié)能存儲系統(tǒng)，增加溫度限制條件，

4、提出的溫度受限的節(jié)能存儲系統(tǒng)改變了系統(tǒng)的溫度特性，在節(jié)能的同時提高系統(tǒng)的可靠性，對實際系統(tǒng)有巨大的經(jīng)濟(jì)效應(yīng)。并從控制理論角度對不同的溫度控制方法進(jìn)行了理論分析和對比。由于設(shè)備溫度變化有較高的遲滯性和隨機(jī)性，本文引入了模糊決策的控制理論和方法對存儲系統(tǒng)的I/O調(diào)度策略進(jìn)行多維度優(yōu)化，實現(xiàn)了溫度閥值的動態(tài)調(diào)節(jié)。
　　在新型存儲器件的性能優(yōu)化研究中，本文提出并研究了基于語義維度的映射表和緩存管理算法。固態(tài)盤在當(dāng)前的存儲系統(tǒng)中得到了越來越

5、多的應(yīng)用。但是，當(dāng)前固態(tài)盤固件的優(yōu)化策略仍然主要基于數(shù)據(jù)訪問的時間和空間局部性原理。這兩個維度的數(shù)據(jù)訪問特點(diǎn)，已經(jīng)被CPU、主存等多級緩存重復(fù)利用。有研究指出，多個主流應(yīng)用——如數(shù)據(jù)庫服務(wù)和網(wǎng)頁服務(wù)——在存取數(shù)據(jù)時，僅能利用固態(tài)硬盤約一半到三分之二的性能。這是因為應(yīng)用程序訪問硬盤數(shù)據(jù)時，主要基于數(shù)據(jù)的語義關(guān)系，即數(shù)據(jù)間的關(guān)聯(lián)性。利用數(shù)據(jù)關(guān)聯(lián)關(guān)系可進(jìn)一步優(yōu)化存儲系統(tǒng)的I/O性能，尤其是在數(shù)據(jù)訪問的局部性較低的器件層。由于上層軟件無法感知固

6、態(tài)盤內(nèi)部的結(jié)構(gòu)特點(diǎn)，在器件層對固態(tài)盤進(jìn)行語義維度的優(yōu)化就變得很有必要。
　　使用有限的內(nèi)存空間對閃存映射表進(jìn)行查找和更新，是導(dǎo)致固態(tài)硬盤的性能下降的主要原因之一。這個問題隨著固態(tài)硬盤容量的提升變得越來越嚴(yán)重。然而，在內(nèi)存空間有限的情況下，固態(tài)盤卻對讀和寫所產(chǎn)生的映射緩存進(jìn)行了無差別的管理。通過對實際的負(fù)載分析得知，寫操作產(chǎn)生的緩存的命中率遠(yuǎn)低于讀操作產(chǎn)生的緩存的命中率。另外，大部分的映射關(guān)系的更新集中在很少的映射頁中?；谶@些觀察

7、，本文為固態(tài)硬盤設(shè)計了寫傾斜感知的緩存管理算法，進(jìn)一步提高了緩存命中率，并降低了固態(tài)盤內(nèi)部的寫放大現(xiàn)象。
　　通過對節(jié)能存儲系統(tǒng)進(jìn)行硬盤溫度建模并增加溫度限制，存儲系統(tǒng)中硬盤的工作溫度降低最大約30%，并基本保持原有的系統(tǒng)負(fù)載與功耗成比例的特性。在負(fù)載壓力測試下，該溫度受限的節(jié)能存儲系統(tǒng)仍能有效保證系統(tǒng)可靠性，并提高總體滿意度約2倍?；谡Z義的固態(tài)盤閃存映射算法可提高最大約58%的緩存命中率，降低實際應(yīng)用負(fù)載的I/O響應(yīng)時間最大約