如何讓冷數(shù)據(jù)更好存儲(chǔ)

近年來(lái)，互聯(lián)網(wǎng)、云計(jì)算、移動(dòng)計(jì)算和物聯(lián)網(wǎng)技術(shù)迅速發(fā)展，數(shù)以億計(jì)的網(wǎng)絡(luò)用戶、無(wú)所不在的移動(dòng)設(shè)備、RFID和無(wú)線傳感器時(shí)時(shí)刻刻都在產(chǎn)生海量的數(shù)據(jù)，并且需要處理的數(shù)據(jù)呈幾何級(jí)數(shù)增長(zhǎng)。據(jù)統(tǒng)計(jì)，這些海量數(shù)據(jù)中只有10%―15%的數(shù)據(jù)是被經(jīng)常訪問(wèn)的，而絕大部分都會(huì)在產(chǎn)生之后隨著時(shí)間的推移逐漸變冷。這些“冷數(shù)據(jù)”的訪問(wèn)率雖然很低，但用戶還是希望保留這些數(shù)據(jù)；對(duì)于企業(yè)而言還有很多數(shù)據(jù)需要進(jìn)行備份和存檔。

對(duì)于冷數(shù)據(jù)的技術(shù)存儲(chǔ)，首先是數(shù)據(jù)的分級(jí)，主要是指從海量的數(shù)據(jù)中根據(jù)文件的訪問(wèn)頻率、價(jià)值等因素，進(jìn)行冷熱數(shù)據(jù)的分類，甚至分出更細(xì)的數(shù)據(jù)類型，如“溫?cái)?shù)據(jù)”、“冰數(shù)據(jù)”等。目前常見(jiàn)的數(shù)據(jù)分級(jí)方法主要有兩類，一類是業(yè)務(wù)數(shù)據(jù)的分類，即基于具體的業(yè)務(wù)類型，結(jié)合長(zhǎng)期以來(lái)的運(yùn)營(yíng)經(jīng)驗(yàn)，進(jìn)行運(yùn)營(yíng)級(jí)的數(shù)據(jù)分類；另一類是基于數(shù)據(jù)存取特性的分類，即借助存儲(chǔ)軟件系統(tǒng)自動(dòng)進(jìn)行數(shù)據(jù)的冷熱分級(jí)。通過(guò)存儲(chǔ)軟件系統(tǒng)對(duì)數(shù)據(jù)進(jìn)行冷熱監(jiān)控，統(tǒng)計(jì)分析一個(gè)時(shí)間周期內(nèi)的IO冷熱程度，并按照設(shè)定的分類策略自動(dòng)進(jìn)行數(shù)據(jù)的分類，并將冷數(shù)據(jù)從前端業(yè)務(wù)存儲(chǔ)系統(tǒng)遷移到冷數(shù)據(jù)存儲(chǔ)系統(tǒng)。存儲(chǔ)密度的提升，幾乎所有的存儲(chǔ)部件廠商都在努力通過(guò)提升單盤的存儲(chǔ)容量來(lái)應(yīng)對(duì)數(shù)據(jù)的快速增長(zhǎng)。

金錢貓云存儲(chǔ)架構(gòu)下的冷存儲(chǔ)技術(shù)產(chǎn)品JES5000高密度低功耗存儲(chǔ)服務(wù)器，5U空間內(nèi)提供80+8個(gè)硬盤槽位，最大支持80塊3.5寸SAS/SATA硬盤，有效降低系統(tǒng)功耗，節(jié)省運(yùn)行成本，可以滿足不同行業(yè)用戶的多樣化需求，是一款綠色節(jié)能產(chǎn)品。運(yùn)營(yíng)能力的提升方面，海量數(shù)據(jù)的存儲(chǔ)需要更智能化的運(yùn)維系統(tǒng)，包括對(duì)數(shù)據(jù)的定期巡檢、數(shù)據(jù)的精細(xì)化分類、自動(dòng)化的數(shù)據(jù)遷移、故障預(yù)測(cè)及定位、設(shè)備的休眠等機(jī)房節(jié)能措施。此外存儲(chǔ)的架構(gòu)設(shè)計(jì)也是當(dāng)前的研究熱點(diǎn)，包括設(shè)備的分級(jí)、存儲(chǔ)介質(zhì)的選型、數(shù)據(jù)存儲(chǔ)格式、數(shù)據(jù)檢索以及對(duì)外服務(wù)接口等。金錢貓云存儲(chǔ)架構(gòu)下的冷存儲(chǔ)技術(shù)產(chǎn)品JES5000高密度低功耗存儲(chǔ)服務(wù)器可以根據(jù)用戶需要，對(duì)存儲(chǔ)系統(tǒng)中海量的數(shù)據(jù)進(jìn)行智能分析和管理，將冷熱數(shù)據(jù)分離，冷數(shù)據(jù)移至低功耗的硬盤中，通過(guò)智能電源管理技術(shù)，實(shí)現(xiàn)硬盤空閑時(shí)自動(dòng)斷電，有數(shù)據(jù)訪問(wèn)時(shí)自動(dòng)加電，有效降低存儲(chǔ)服務(wù)器整機(jī)運(yùn)行功耗，并通過(guò)清理垃圾數(shù)據(jù)、數(shù)據(jù)去重、備份、歸檔等技術(shù)有效優(yōu)化存儲(chǔ)管理，全面提高存儲(chǔ)效率，降低存儲(chǔ)和運(yùn)營(yíng)成本。

另外，數(shù)據(jù)訪問(wèn)延遲、整體讀取速率以及數(shù)據(jù)持久性等，也是海量冷數(shù)據(jù)存儲(chǔ)的關(guān)鍵技術(shù)。這些關(guān)鍵技術(shù)相互制約影響，尤其是在運(yùn)營(yíng)能力提升方面，涉及的因素眾多，對(duì)冷數(shù)據(jù)存儲(chǔ)的選型提出了新的挑戰(zhàn)。企業(yè)可以根據(jù)自身的業(yè)務(wù)特點(diǎn)，結(jié)合多年的運(yùn)營(yíng)經(jīng)驗(yàn)和業(yè)務(wù)預(yù)測(cè)，進(jìn)行存儲(chǔ)架構(gòu)的整體設(shè)計(jì)，并基于其在冷存儲(chǔ)方面的經(jīng)驗(yàn)和技術(shù)積累，對(duì)外提供了相關(guān)的冷數(shù)據(jù)存儲(chǔ)服務(wù)。金錢貓云存儲(chǔ)架構(gòu)下的冷存儲(chǔ)技術(shù)產(chǎn)品JES5000高密度低功耗存儲(chǔ)服務(wù)器能同時(shí)數(shù)據(jù)存儲(chǔ)在冷盤中支持在線可訪問(wèn)，僅5-10S就可響應(yīng)，比光盤、磁帶等離線存儲(chǔ)更理想，更友好，更方便。

金錢貓