相信經(jīng)歷了過往十年中國經(jīng)濟巨大的價值遷移變化的每個人,都會對這一簡潔而深刻的表述有自己的理解。
政策紅利、人口紅利、土地紅利后,數(shù)字紅利、數(shù)字經(jīng)濟開始占據(jù)更重要的位置,AI作為核心能力更是被賦予重要的位置,被認為是能引發(fā)數(shù)字經(jīng)濟時代從量變到質(zhì)變的重要能力。數(shù)字經(jīng)濟平臺就像航母平臺一樣,并不是每個國家都能擁有,需要海量的數(shù)據(jù)承載。AI時代,中國有著天然的數(shù)字規(guī)模優(yōu)勢。
面對海量的數(shù)據(jù),如何驅(qū)動這艘巨大的“航母”快速而持續(xù)的前行?動力強大、持續(xù)穩(wěn)定輸出的“核動力”必不可缺,百度云圍繞如何打造“核動力”存儲系統(tǒng),滿足海量文件高性能場景的需求,推出ABC Storage高性能全閃對象存儲解決方案,面向私有云客戶交付。
ABC Storage的5臺存儲集群就可以滿足200臺AI訓(xùn)練集群對100億訓(xùn)練樣本的并發(fā)吞吐性能要求,實現(xiàn)高效的AI訓(xùn)練迭代,TCO降低60%以上。
高性能、低延遲、線性擴展,在集群不變情況下,性能不受文件數(shù)量增長影響,ABC Storage全閃對象存儲方案為海量文件處理場景提供了新解法。
傳統(tǒng)商業(yè)NAS存儲需要維護龐大的文件系統(tǒng)結(jié)構(gòu),隨著文件數(shù)量增長,檢索、讀寫能力急劇下降。3-5年的商業(yè)存儲擴容遷移,面對幾億、幾十億甚至幾百億的文件,更是成本高昂。
對象存儲盡管基于哈希技術(shù),有免遷移、文件擴展能力強的特點,但是響應(yīng)的延遲較高。ABC Storage全閃對象存儲解決方案的高性能存儲引擎結(jié)合高密度方案,在達到業(yè)內(nèi)領(lǐng)先性能和延遲水平的同時,具有很好的ROI。
ABC Storage是百度云存儲產(chǎn)品的私有化輸出,百度云在存儲上技術(shù)積累深厚,2009年分布式網(wǎng)頁存儲支撐了1000億+網(wǎng)頁的存儲。公有云對象存儲BOS自2010年上線以來,歷經(jīng)8年的技術(shù)實踐和運營積累,規(guī)模全國最大。支撐百度搜索、百度網(wǎng)盤等內(nèi)部業(yè)務(wù)的同時,還對外為數(shù)萬家外部客戶提供對象存儲服務(wù),已經(jīng)支持超過數(shù)萬億的對象和超過2000PB的數(shù)據(jù)量。
目前百度云公有云擁有塊存儲、文件存儲、表格存儲、CDN以及存儲+AI的完善解決方案。ABC Storage私有云存儲也已經(jīng)實現(xiàn)在銀行、保險、支付等金融行業(yè)的落地。
AI時代,數(shù)據(jù)的競爭力越來越重要,企業(yè)一方面越來越關(guān)注數(shù)據(jù)的管理和價值挖掘,另一方面又擔心數(shù)據(jù)的安全和私有性,更傾向于選擇私有云存儲。
百度云私有云存儲ABC Storage,除了高性能方案,通過一次檢索,可以持續(xù)的為企業(yè)提供數(shù)據(jù)的存儲、管理和價值發(fā)掘,打破傳統(tǒng)商業(yè)存儲的束縛。同時,ABC Storage可以與百度的私有化AI方案無縫對接,更好的驅(qū)動數(shù)據(jù)在企業(yè)的經(jīng)濟價值發(fā)掘。AI時代數(shù)字經(jīng)濟的大浪潮下, “核動力”級別的ABC Storage不可或缺。