當(dāng)今世界,互聯(lián)網(wǎng)、大數(shù)據(jù)應(yīng)用迅猛發(fā)展,物聯(lián)網(wǎng)、人工智能、云計(jì)算 技術(shù)日新月異,隨之而來的是各種企業(yè)和個(gè)人應(yīng)用持續(xù)不斷地產(chǎn)生億級(jí)甚至是百億級(jí)的海量小文件。這些小文件的元數(shù)據(jù)管理、存儲(chǔ)性能以及訪問效率等問題因而成為學(xué)術(shù)界和工業(yè)界公認(rèn)的難題。
例如,國內(nèi)目前最大的電商網(wǎng)站淘寶存儲(chǔ)的商品圖片超過 200 億張,這些文件的平均大小僅為 15KB 左右,國外著名的社交網(wǎng)站Facebook 存儲(chǔ)的圖片總量更是超過了600億張;在線視頻播放服務(wù)中,每個(gè)視頻會(huì)被切片服務(wù)器分割成 1MB 左右的分片文件,一部動(dòng)畫電影所包含的圖片文件可能會(huì)超過 500 萬張,平均大小為15KB;一些在線閱讀圖書每頁內(nèi)容均會(huì)被掃描成大約幾十KB的圖片文件……
在非結(jié)構(gòu)化數(shù)據(jù)和新應(yīng)用快速增加的情況下,對(duì)象存儲(chǔ)更能滿足企業(yè)的業(yè)務(wù)需求。為此,杉巖數(shù)據(jù)推出了強(qiáng)大的對(duì)象存儲(chǔ)產(chǎn)品,解決企業(yè)對(duì)海量圖片、視頻等非結(jié)構(gòu)數(shù)據(jù)存儲(chǔ)需求,以便更好的挖掘非結(jié)構(gòu)化數(shù)據(jù)的價(jià)值。
端到端的Scale-Out擴(kuò)展,實(shí)現(xiàn)大數(shù)據(jù)積累
分布式對(duì)象存儲(chǔ)總?cè)萘靠蛇_(dá)到數(shù)百PB級(jí)規(guī)模,單個(gè)名字空間也可以擴(kuò)展到整個(gè)硬件存儲(chǔ)總空間容量,不需要割裂成多個(gè)隔離空間,并且在文件數(shù)量上會(huì)有更大的擴(kuò)展,文件數(shù)量可達(dá)百億級(jí),是真正的端到端Scale-Out快速擴(kuò)展。它可以滿足業(yè)務(wù)系統(tǒng)整個(gè)生命周期的存儲(chǔ)容量需求,無需掛載目錄和調(diào)整業(yè)務(wù)系統(tǒng),讓IT人員更加關(guān)注業(yè)務(wù)價(jià)值本身。
去中心化存儲(chǔ)架構(gòu),利于數(shù)據(jù)的長(zhǎng)期維護(hù)
對(duì)象存儲(chǔ)采用基于通用x86服務(wù)器+分布式對(duì)象存儲(chǔ)軟件的去中心化技術(shù)架構(gòu),對(duì)象存儲(chǔ)軟件將多臺(tái)服務(wù)器通過以太網(wǎng)連接,構(gòu)建成一個(gè)統(tǒng)一的存儲(chǔ)資源池,可動(dòng)態(tài)增加或刪除服務(wù)器實(shí)現(xiàn)容量的調(diào)整,數(shù)據(jù)能夠自動(dòng)均衡,實(shí)現(xiàn)整個(gè)存儲(chǔ)的滾動(dòng)升級(jí)。
三級(jí)數(shù)據(jù)可靠性體系,保障業(yè)務(wù)高可用
杉巖對(duì)象存儲(chǔ)提供了先進(jìn)的三級(jí)數(shù)據(jù)可靠性體系,通過單集群故障自愈、跨集群容災(zāi)、建立備份機(jī)制三大措施來確保企業(yè)數(shù)據(jù)安全可靠,從而保障業(yè)務(wù)的高可靠和高可用性。
· 第一級(jí):
在單集群內(nèi)通過副本機(jī)制進(jìn)行數(shù)據(jù)放置,當(dāng)出現(xiàn)故障時(shí)可以從副本中自動(dòng)進(jìn)行快速恢復(fù)。此外,還通過糾刪碼機(jī)制創(chuàng)建校驗(yàn)塊,出現(xiàn)錯(cuò)誤后可以自動(dòng)進(jìn)行計(jì)算恢復(fù),從而保證集群內(nèi)數(shù)據(jù)的可靠性。
· 第二級(jí):
在集群多個(gè)區(qū)域故障的時(shí)候,提供跨集群容災(zāi)方案。支持二到六個(gè)數(shù)據(jù)中心的數(shù)據(jù)容災(zāi),包括雙中心或者是更復(fù)雜的方式建立存儲(chǔ)集群,不同數(shù)據(jù)中心之間進(jìn)行數(shù)據(jù)異步傳輸。
· 第三級(jí):
建立主存儲(chǔ)和備份存儲(chǔ)機(jī)制。通過按照指定的規(guī)則創(chuàng)建備份點(diǎn),比如按時(shí)間緯度或業(yè)務(wù)變更時(shí)進(jìn)行自動(dòng)創(chuàng)建。當(dāng)需要數(shù)據(jù)恢復(fù)時(shí),可以快速通過備份點(diǎn)回退到原來的版本。另外,備份工作無需使用額外的備份軟件,同時(shí)備份存儲(chǔ)也可以作為容災(zāi)使用。
提供高效的數(shù)據(jù)流轉(zhuǎn)與訪問架構(gòu)
通過進(jìn)行分支機(jī)構(gòu)到主數(shù)據(jù)中心的數(shù)據(jù)匯聚,新增數(shù)據(jù)自動(dòng)匯聚到主數(shù)據(jù)中心,實(shí)現(xiàn)數(shù)據(jù)統(tǒng)一管理和運(yùn)維。當(dāng)分支機(jī)構(gòu)需要訪問數(shù)據(jù)時(shí),可實(shí)現(xiàn)CDN內(nèi)容分發(fā)網(wǎng)絡(luò)效果,提升數(shù)據(jù)傳輸速率。針對(duì)互聯(lián)網(wǎng)應(yīng)用還使用高安全性的S3協(xié)議技術(shù),提供給外部的互聯(lián)網(wǎng)應(yīng)用直接來訪問存儲(chǔ)。
內(nèi)置文件名和標(biāo)簽索引機(jī)制,實(shí)現(xiàn)毫秒級(jí)檢索
通過采用標(biāo)簽系統(tǒng),把文件和相關(guān)的屬性標(biāo)簽統(tǒng)一存儲(chǔ)到系統(tǒng)中,然后在本地建立這種文件名和屬性的索引庫,從而實(shí)現(xiàn)數(shù)據(jù)毫秒級(jí)高速檢索,滿足更多業(yè)務(wù)需求。
對(duì)象存儲(chǔ)+AI,創(chuàng)造無限可能
在完成大量非結(jié)構(gòu)化數(shù)據(jù)積累后,企業(yè)可以通過結(jié)合AI先進(jìn)的數(shù)據(jù)分析與挖掘技術(shù),發(fā)揮海量數(shù)據(jù)背后的價(jià)值,為更多智能化的新業(yè)務(wù)系統(tǒng)提供強(qiáng)勁助力,支撐企業(yè)業(yè)務(wù)發(fā)展。
科技世界日新月異,云、大數(shù)據(jù)、人工智能等新興技術(shù)的發(fā)展和普及快到讓人驚嘆。杉巖數(shù)據(jù)將一直專注軟件定義存儲(chǔ)領(lǐng)域的技術(shù)與創(chuàng)新,為企業(yè)用戶提供數(shù)據(jù)存儲(chǔ)強(qiáng)勁支撐,幫助企業(yè)更好、更快、更省心的迎接美好的未來。
電子發(fā)燒友App



























































評(píng)論