存儲解決方案
摘要:浪潮按照數據讀取的熱度,將數據分為寒帶、溫帶、亞熱帶和熱帶數據,并通過(guò)不同速率的存儲介質(zhì)和不同處理速度的CPU的配比,實(shí)現數據存儲的成本最優(yōu),使數據存儲更適合上層業(yè)務(wù)應用。
背景介紹:
大數據時(shí)代,每天產(chǎn)生的數據量成爆炸式增長(cháng),傳統的統一存儲方式出現了數據存儲瓶頸和成本激增。數據分級存儲就是為了解決存儲瓶頸和降低存儲成本,將不同“體溫”數據安置到不同的容器中,能夠變統一為分級,提升存儲的'利用效率,降低數據存儲成本;诖,我們將存儲設備分為寒帶存儲、溫帶存儲、亞熱帶存儲和熱帶存儲,以適應不同“體溫”的數據。
終端用戶(hù)和數據的關(guān)系就像人與人之間的關(guān)系疏密一樣,熱門(mén)的新聞、視頻、數據是粉絲居多的熱門(mén)明星,N月前的郵件、照片就是無(wú)人問(wèn)津的昔日小生。對于不能溫度的數據,服務(wù)商需要提供的IO響應也是不同的,熱門(mén)數據自然需要數萬(wàn)甚至數十萬(wàn)的IO來(lái)滿(mǎn)足,被遺落的數據有幾個(gè)IO就夠了。當前大部分的互聯(lián)網(wǎng)數據還是統一存儲在一個(gè)大的存儲池,使用的設備也一般為2U存儲服務(wù)器,這必然會(huì )出現需要高IO時(shí)無(wú)法提供造成客戶(hù)體驗差,且TCO居高不下,如何解決一直是困擾運維工程師的難題。
解決方案介紹:
分級存儲方案——合久必分
為了更進(jìn)一步細分數據等級,能夠更好分配資源和提高收益,浪潮分級存儲方案將互聯(lián)網(wǎng)客戶(hù)大數據按照溫度分為寒帶存儲、溫帶存儲、亞熱帶存儲和熱帶存儲。浪潮SA5112M4 NVMe機型最多支持4片NVMe SSD,可以提供100k級別IOPS,滿(mǎn)足極熱數據的高并發(fā)訪(fǎng)問(wèn)需求,完美解決被數據頻繁的訪(fǎng)問(wèn);對于亞熱地數據,SATA SSD的性能可以滿(mǎn)足,所以浪潮服務(wù)器滿(mǎn)足單節點(diǎn)最多配置8塊SATA SSD,單盤(pán)提供10k級別的IOPS響應能力;溫帶數據相比熱數據體量陡然增高,所以相比較需要成本更低的存儲方案,浪潮SA5212M4滿(mǎn)足12塊3.5寸大容量硬盤(pán)配置,最大容量高達120TB,滿(mǎn)足分布式大容量數據存儲;對于沉淀下來(lái)的冷數據,自然要使用最低成本、低功耗的方案,才可以降低TCO,由于要求IOPS低,SA5224L4滿(mǎn)足36塊大容量云盤(pán)存儲硬盤(pán),最高提供288TB的海量空間,冷存儲方案絕佳方案。
數據分級 |
訪(fǎng)問(wèn)頻次 |
IOPS需求 |
解決方案 |
熱帶數據 |
實(shí)時(shí)、大量 |
100K級別 |
SA5112M4+NVMe |
亞熱帶數據 |
幾十次/天 |
10K級別 |
SA5112M4+SSD |
溫帶數據 |
幾次/周 |
100級別 |
SA5212M4+企業(yè)級SATA |
寒帶數據 |
幾次/月 |
10級別 |
SA5224L4+云盤(pán) |
【存儲解決方案】相關(guān)文章:
閃存存儲知識細則03-12