當(dāng)前位置:首頁 >  IDC >  云計算 >  正文

如何應(yīng)對大數(shù)據(jù)時代存儲挑戰(zhàn)?青云QingCloud帶來答案

 2022-09-06 17:21  來源: 互聯(lián)網(wǎng)   我來投稿 撤稿糾錯

  域名預(yù)訂/競價,好“米”不錯過

當(dāng)下,隨著企業(yè)數(shù)字化發(fā)展進入到深水區(qū),數(shù)據(jù)已經(jīng)成為企業(yè)核心生產(chǎn)要素,數(shù)據(jù)的存儲、管理、迭代、應(yīng)用都變得越發(fā)重要。

  尤其是隨著各行業(yè)“云化”和數(shù)字化轉(zhuǎn)型的不斷深入,越來越多的企業(yè)基于云原生技術(shù)來構(gòu)建、管理應(yīng)用,充分利用云的優(yōu)勢來助力業(yè)務(wù)創(chuàng)新,而存儲系統(tǒng)一直以來都是基礎(chǔ)設(shè)施軟件中的核心之一。

  場景和算力推動存儲行業(yè)發(fā)生變革

  目前,海量應(yīng)用的興起,數(shù)據(jù)量呈現(xiàn)爆炸式增長,數(shù)據(jù)類型也更加多樣復(fù)雜。據(jù)IDC預(yù)測,全球數(shù)據(jù)量預(yù)計2025年將達到175ZB,其中非結(jié)構(gòu)化數(shù)據(jù)占比將高達80%。

  另據(jù)Gartner預(yù)測,到2025年有75%的企業(yè)所生成的數(shù)據(jù)會在數(shù)據(jù)中心或云之外進行創(chuàng)建或處理。此外,數(shù)據(jù)的類型也在發(fā)生變化,隨著技術(shù)的各種深入應(yīng)用,視頻、音頻、影像等各種非結(jié)構(gòu)化數(shù)據(jù)的增長更為迅速。

  數(shù)字經(jīng)濟時代到來,也讓我們?nèi)粘Ia(chǎn)和生活發(fā)生改變,青云科技(qingcloud.com,股票代碼:688316)存儲產(chǎn)品總監(jiān)馮相東曾分享道:“在自動駕駛汽車行業(yè),其出貨量已經(jīng)達到3000多萬輛,一輛自動駕駛汽車滿負(fù)荷做測試的情況下,每天可以產(chǎn)生的數(shù)據(jù)量可以達到數(shù)TB甚至數(shù)十TB。再比如,全球物聯(lián)網(wǎng)終端的設(shè)備數(shù)量,現(xiàn)在已經(jīng)達到100多億,通常情況下,一家智慧工廠每天產(chǎn)生的數(shù)據(jù)量都可以達到PB級。除此之外,還有大量AR/VR的終端設(shè)備、5G 基站,這些設(shè)備都在不斷采集和產(chǎn)生新的數(shù)據(jù)。”

  上述數(shù)據(jù)體現(xiàn)出場景和算力的變化:

  首先是場景的變化。過去二三十年,企業(yè)從最早期階段的傳統(tǒng)OA應(yīng)用、數(shù)據(jù)庫,到后來的互聯(lián)網(wǎng)時代、移動互聯(lián)網(wǎng)時代,再到近幾年的5G、AI、IoT,甚至類似元宇宙的概念,其實場景是在不斷發(fā)生變化的。新應(yīng)用層出不窮,隨之不斷產(chǎn)生新的數(shù)據(jù)形態(tài),導(dǎo)致針對這些數(shù)據(jù)分析的需求也是在不斷變化的。

  在變化過程中,存儲作為整個數(shù)據(jù)管理的核心,其重要性也越來越明顯。這也說明場景的變化影響整個存儲產(chǎn)業(yè)往前演進。

  還有另外一個維度,就是算力的變化。算力的演進對存儲形態(tài)變化也起到非常重要的影響作用,最初計算能力的承載,大部分使用物理機,后來會使用到虛擬化、云計算,再后來,開始越來越多地轉(zhuǎn)向容器平臺、云原生。

  在場景和算力推動整個存儲形態(tài)往前變革的基礎(chǔ)上,還有這些年大家一直在討論的熱點話題,也是和存儲緊密相關(guān)的,就是如何讓數(shù)據(jù)更好地流動起來。

  在數(shù)據(jù)流動的完整鏈條里,我們可以看到從最初的采集、處理到后面的歸檔、再利用、銷毀,都會涉及存儲與大數(shù)據(jù)技術(shù)、存儲與AI計算技術(shù)的結(jié)合,這能讓數(shù)據(jù)更高效地被捕獲、被索引、被分析和被加工,從而實現(xiàn)數(shù)據(jù)層面的點石成金。

青云自研存儲能力幾何?

  目前,青云經(jīng)過整個存儲產(chǎn)品的演進,QingStor產(chǎn)品線主要有兩款核心產(chǎn)品構(gòu)成:一是QingStor NeonSAN,二是QingStor U10000。

  首先是QingStor NeonSAN,它主要面向的場景是云盤、數(shù)據(jù)庫以及虛擬化存儲資源池場景的應(yīng)用。

  作為一款分布式塊存儲,其整個設(shè)計原則是為I/O極致性能而設(shè)計的。所以它有幾個關(guān)鍵性能的指標(biāo),比如NeonSAN最短的I/O時延可以控制在50微秒左右;只需要3臺NeonSAN的節(jié)點,就可以給到業(yè)務(wù)100萬的IOPS。

  而QingStor U10000主要面向非結(jié)構(gòu)化數(shù)據(jù)的場景,這里主要包括各種影像數(shù)據(jù)、音視頻數(shù)據(jù)、數(shù)據(jù)湖、大數(shù)據(jù)、物聯(lián)網(wǎng)等場景。

  該產(chǎn)品設(shè)計初衷就是幫助客戶更好實現(xiàn)海量數(shù)據(jù)的價值挖掘,產(chǎn)品的核心特點包括,同時提供對象、文件、大數(shù)據(jù)接口,不同協(xié)議之間實現(xiàn)數(shù)據(jù)無損訪問互通;單存儲桶支持100多億個對象,并且性能不會隨之下降。

  兩款產(chǎn)品有各自面向的專業(yè)場景,有各自專業(yè)的分工,這也意味著,青云沒有用一種架構(gòu)同時滿足結(jié)構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù)場景。因為從專業(yè)技術(shù)的視角來看,一種存儲架構(gòu)不可能同時做到既能滿足極致的性能設(shè)計要求,也能滿足海量數(shù)據(jù)吞吐、計算、并發(fā)利用的需求。青云希望通過專業(yè)的存儲分工能更好地服務(wù)專業(yè)的場景。

  其中,U10000是青云在多年存儲技術(shù)積累基礎(chǔ)上的一次產(chǎn)品全面升級。它繼承了原來青云對象存儲、文件存儲的所有能力,并且在多個維度上實現(xiàn)了產(chǎn)品力的增強和迭代。

  馮相東表示:“QingStor U10000相比于之前的QingStor對象存儲和文件存儲,除了產(chǎn)品力的全面繼承,主要在以下幾個方面有一些明顯的提升:實現(xiàn)數(shù)據(jù)協(xié)議的互通,功能和性能的增強,整個算力平臺對接的強化。”

  我們可以看到,U10000的基本架構(gòu)主要包括接入服務(wù)層、存儲服務(wù)層和統(tǒng)一運維管理平臺三大模塊。

  而除了核心架構(gòu)以外,QingStor U10000平臺還具備了三大核心特點:

  首先是U10000作為面向海量非結(jié)構(gòu)化數(shù)據(jù)的存儲平臺,最基本的特點是首先具備了支撐海量數(shù)據(jù)存儲的能力,同時保證提供卓越的性能。

  其次,U10000具備多協(xié)議無損互通,從而實現(xiàn)數(shù)據(jù)的訪問和流通的高效,包括統(tǒng)一索引架構(gòu),提供多種存儲能力、多協(xié)議存儲接口供選擇、協(xié)議互通,讓數(shù)據(jù)分析更高效。

  最后是與算力的無縫對接,讓數(shù)據(jù)點石成金。得益于青云多年的積累,U10000具備豐富的數(shù)據(jù)處理的功能特性,能夠提供一系列完善的API、SDK,可以輕松地對接大數(shù)據(jù)平臺、數(shù)據(jù)處理的框架和服務(wù),實現(xiàn)數(shù)據(jù)和算力的高效結(jié)合,最終讓數(shù)據(jù)實現(xiàn)點石成金。

  針對于企業(yè)關(guān)注的數(shù)據(jù)安全方面,U10000也從元數(shù)據(jù)和存儲數(shù)據(jù)的分層設(shè)計、多重訪問安全機制、智能預(yù)警機制,以及功能服務(wù)的運維監(jiān)控平臺等幾個維度來保障數(shù)據(jù)安全。

  我們發(fā)現(xiàn),通過U10000的發(fā)布,青云讓存儲產(chǎn)品更落地場景,旨在幫企業(yè)解決業(yè)務(wù)問題,而不僅僅是增強IT能力。

 寫在最后

  一直以來,青云對軟件定義存儲的思考不是孤立的,他們會把核心聚焦在如何滿足算力對存儲的需求這個維度上,讓存儲更好地賦能算力。

  總結(jié)下來,青云經(jīng)過數(shù)年的積累,以核心技術(shù)為基石,打造了一條完整的、富有競爭力的分布式存儲產(chǎn)品線,并已全面兼容業(yè)內(nèi)主流國產(chǎn)化平臺。另外,由于云廠商的自帶基因,其存儲產(chǎn)品在和云原生技術(shù)的結(jié)合上,有自己先天的優(yōu)勢。

申請創(chuàng)業(yè)報道,分享創(chuàng)業(yè)好點子。點擊此處,共同探討創(chuàng)業(yè)新機遇!

相關(guān)標(biāo)簽
云服務(wù)
數(shù)字經(jīng)濟

相關(guān)文章

  • 定義大模型算力 北京超算亮相全球數(shù)字經(jīng)濟大會

    2023年7月7日,2023全球數(shù)字經(jīng)濟大會在北京國家會議中心成功閉幕,本屆大會由北京市人民政府、工業(yè)和信息化部、商務(wù)部、國家互聯(lián)網(wǎng)信息辦公室、中國科學(xué)技術(shù)協(xié)會共同主辦,以“數(shù)據(jù)驅(qū)動發(fā)展,智能引領(lǐng)未來”為主題,致力于構(gòu)建國際頂級的交流與合作平臺,共創(chuàng)普惠均衡、創(chuàng)新包容、合作共贏、共同繁榮的全球數(shù)字經(jīng)

    標(biāo)簽:
    數(shù)字經(jīng)濟
  • 深信服何朝曦:以更簡單、更安全的中國數(shù)字經(jīng)驗,助力東盟產(chǎn)業(yè)發(fā)展

    7月4日,中國—東盟新興產(chǎn)業(yè)論壇在深圳市召開。論壇由工業(yè)和信息化部、廣東省人民政府、深圳市人民政府主辦,以“開放包容,協(xié)同共享,共促新興產(chǎn)業(yè)務(wù)實合作”為主題,中國工業(yè)和信息化部部長金壯龍、印尼工業(yè)部部長阿古斯、新加坡新聞和通訊部部長楊莉明、老撾工業(yè)和貿(mào)易部部長貢瑪西、緬甸工業(yè)部部長查理丹、菲律賓信息

    標(biāo)簽:
    數(shù)字經(jīng)濟
  • 遼寧:數(shù)字經(jīng)濟在工業(yè)領(lǐng)域的滲透力達到24%

    7月6日,2023中國國際數(shù)字和軟件服務(wù)交易會在大連開幕。本屆主題為“數(shù)字創(chuàng)新、融合發(fā)展”。商務(wù)部、科技部、貿(mào)促會和遼寧省人民政府主辦,大連市人民政府和商務(wù)部外貿(mào)發(fā)展事務(wù)局承辦。6日-9日展會期間,將中國計算機學(xué)會東北論壇、華為開發(fā)者大會2023大連分會場等40余個專業(yè)論壇,以及產(chǎn)業(yè)合作、人才交流、

    標(biāo)簽:
    數(shù)字經(jīng)濟
  • 強強聯(lián)合!百望云入駐微軟實驗室,揭開數(shù)智發(fā)展新篇章!

    OpenAI是什么,隨著ChatGPT的爆火,相信大家都并不陌生了。而微軟也第一時間推出了AzureOpenAI加速計劃,希望憑借OpenAI的卓越能力,為企業(yè)賦能,幫助越來越多的企業(yè)將AI大模型的基礎(chǔ)能力,與企業(yè)場景相結(jié)合,開拓新的商業(yè)范式,引領(lǐng)行業(yè)變革。近日,以“智領(lǐng)新變共創(chuàng)未來”為主題的“微軟

    標(biāo)簽:
    云服務(wù)
  • 新成果、新服務(wù)、新生態(tài),HPE混合云領(lǐng)導(dǎo)者地位再提升!

    HPE擴大混合云和私有云產(chǎn)品的覆蓋范圍、靈活選項和創(chuàng)新功能,領(lǐng)導(dǎo)者地位再提升!HPEDiscover科技盛會上,HPE宣布了HPEGreenLake邊緣到云平臺、混合云服務(wù)、私有云產(chǎn)品組合的創(chuàng)新成果,以及合作伙伴生態(tài)系統(tǒng)的最新進展:·HPE完成對OpsRamp公司的收購;相關(guān)解決方案現(xiàn)已作為HPEG

    標(biāo)簽:
    云服務(wù)

熱門排行

信息推薦