每年被創(chuàng)建、采集或是復(fù)制的數(shù)據(jù)集合就是全球數(shù)據(jù)圈,2018至2025年全球數(shù)據(jù)圈將增長5倍以上。IDC預(yù)測,全球數(shù)據(jù)圈將從2018年的33ZB增至2025年的175ZB。
2月21日,希捷科技“數(shù)能怒放—從邊緣到核心—全球數(shù)據(jù)圈暨中國區(qū)白皮書發(fā)布會”正式召開,會上由希捷科技贊助、國際數(shù)據(jù)公司(IDC)發(fā)布的《數(shù)字化世界—從邊緣到核心》白皮書以及《IDC:2025年中國將擁有全球大的數(shù)據(jù)圈》白皮書的主要研究成果。
希捷以四大研發(fā)支柱為核心——數(shù)據(jù)創(chuàng)建、物理設(shè)備、數(shù)據(jù)安全以及數(shù)據(jù)流。雷鋒網(wǎng)在現(xiàn)場了解到,希捷科技全球副總裁暨中國區(qū)總裁孫丹稱:“數(shù)據(jù)已然成為了不可或缺的關(guān)鍵生產(chǎn)力,而科學合理地獲取、存儲、分析以及利用數(shù)據(jù)成為抓住商機的有效途徑。毋庸置疑,中國的數(shù)據(jù)圈在全球占據(jù)著非常重要的地位,并將在2025年高居榜首。中國數(shù)據(jù)的爆發(fā)主要來自于人工智能、物聯(lián)網(wǎng)、云計算、邊緣計算等新興技術(shù)。”
數(shù)據(jù)圈中,多方市場動態(tài)推動了企業(yè)份額的增長,包括大數(shù)據(jù)和分析的增長;消費者數(shù)據(jù)存儲從本地設(shè)備到云端的遷移;AI在醫(yī)療保健、智慧城市、自動駕駛汽車等領(lǐng)域的應(yīng)用;應(yīng)用程序、邊緣設(shè)備和物聯(lián)網(wǎng)傳感器的普及,系統(tǒng)與用戶互動并收集數(shù)據(jù)(包括雪亮工程);模擬到數(shù)字電視的遷移完成;用于測試和開發(fā)、分析或合規(guī)性目的的數(shù)據(jù)保存。
上圖顯示了中國數(shù)據(jù)圈數(shù)據(jù)創(chuàng)建或復(fù)制的位置。基本上,大部分數(shù)據(jù)都在終端創(chuàng)建,而且越來越多的數(shù)據(jù)會在邊緣被復(fù)制、傳輸或備份。而在邊緣復(fù)制的一些數(shù)據(jù)終也將在核心復(fù)制。
隨著存儲從企業(yè)和終端用戶設(shè)備遷移到云,存儲環(huán)境將發(fā)生重大變化。在中國,公有云存儲在所有存儲數(shù)據(jù)(不包含公有云數(shù)據(jù),但包括所有其他企業(yè)級、PC、電話,以及HDD、閃存、磁盤和光碟等所有介質(zhì)類型的服務(wù)器數(shù)據(jù))中的份額將從2015年的3%增長到2025年的28%。
IDC認為云存儲的采用正在進入下一階段,企業(yè)正逐漸從“全部存儲在一地”或僅僅使用公有云模式轉(zhuǎn)變?yōu)檫x用更精細的、適合自己的方法,也就是多云和混合云基礎(chǔ)架構(gòu)。事實上,超過80%的中國企業(yè)承認將在2020年前擁有多云戰(zhàn)略,但只有少數(shù)企業(yè)對其多云環(huán)境的設(shè)計和協(xié)同能力有信心,良好的設(shè)計和協(xié)同能力意味著數(shù)據(jù)具有完全的可視性,保障實現(xiàn)有效的分析或信息監(jiān)管。
上圖顯示了公有云存儲和非云存儲的預(yù)測趨勢。公有云存儲和非云存儲都在大幅增長,但是公有云存儲增長不及非云存儲。
數(shù)據(jù)挑戰(zhàn):
挑戰(zhàn)和機遇不僅僅來自于數(shù)據(jù)增長。以下常見的三個要點值得所有地區(qū)考量:
安全性:在全球范圍內(nèi),IDC統(tǒng)計,在2018年,數(shù)據(jù)圈中56%的數(shù)據(jù)需要一定程度的安全保護,從簡單的帳戶信息保護,到銀行存款、關(guān)鍵基礎(chǔ)設(shè)施和用戶身份的全面“鎖定”保護。到2025年,需要安全保護的數(shù)據(jù)將從56%的比例增加至66%。然而,需要保護并已經(jīng)受到保護的數(shù)據(jù)的百分比僅僅從45%上升至50%。按照這個速度,從現(xiàn)在到2025年,中國需要保護但未受到保護的數(shù)據(jù)將比其數(shù)據(jù)圈增長得更快,占據(jù)數(shù)據(jù)圈的三分之一,到2025年將達到16.2ZB。
實時數(shù)據(jù):在全球范圍內(nèi),受物聯(lián)網(wǎng)的驅(qū)動,數(shù)據(jù)圈的實時數(shù)據(jù)占比將從2015年的12%增長到2025年的29%。將上述百分比應(yīng)用于中國,到2025年實時數(shù)據(jù)增長將超過34倍,占全球?qū)崟r數(shù)據(jù)的28%。實時數(shù)據(jù)的增長將提升邊緣計算機(邊緣計算機尚未就位)的自動化水平,同時IT組織將引入更多的中斷驅(qū)動流量。在中斷驅(qū)動流量中,信號或信息輸入必須實時處理。IT組織將在此過程中承擔更多的計算任務(wù),而計算任務(wù)之前是由業(yè)務(wù)部門承擔的。
數(shù)據(jù)碎片化:隨著多云基礎(chǔ)架構(gòu)的普及,以及組織機構(gòu)從邊緣到核心再到云端的IT服務(wù)和應(yīng)用的連續(xù)發(fā)展,數(shù)據(jù)在多個平臺和應(yīng)用程序中高度分散,數(shù)據(jù)的識別、分類、管理、保護和利用變得更加困難。組織機構(gòu)需要評估完整的數(shù)據(jù)管道并制定數(shù)據(jù)優(yōu)先的策略以規(guī)避風險。
端邊云數(shù)據(jù)如何打通
IDC高級副總裁DaveReinsel表示:“IDC攜手希捷科技共同洞悉數(shù)據(jù)圈未來趨勢。我們的研究發(fā)現(xiàn),中國數(shù)據(jù)圈的發(fā)展迅猛并呈現(xiàn)出與全球數(shù)據(jù)圈不同的特點,云端、邊緣、核心的數(shù)據(jù)協(xié)同將是中國企業(yè)改進生產(chǎn)力和提升消費者體驗的關(guān)鍵。”
數(shù)據(jù)產(chǎn)生于端、邊、云,同時也流淌其中,公有云廠商如何打通云端邊,給企業(yè)和更多用戶帶來更多價值?
騰訊云存儲產(chǎn)品中心研發(fā)副總經(jīng)理陳崢提到了三個方面。第一是成本,數(shù)據(jù)要有載體落地,硬件上和希捷一起合作取得比較長足的進步。騰訊云通過一些業(yè)界比較成熟的技術(shù),在保證數(shù)據(jù)可靠性、可用性的同時,不斷降低成本。除此之外騰訊云還會跟希捷在未來展開更深入合作,比如雙磁臂磁盤以及HAMR等。
第二,隨著數(shù)據(jù)呈指數(shù)級增長,對整個分布式系統(tǒng)的架構(gòu)帶來很大沖擊。公有云在可用性和可靠性方面迎來新挑戰(zhàn),主要是在系統(tǒng)架構(gòu)層面如何確保數(shù)據(jù)不丟失,可用性方面如何保證用戶體驗到四個9或者五個9的高可用服務(wù)。
第三,在性能方面,騰訊云和希捷的合作主要在硬件層面,在軟件方面面臨不同行業(yè)要求也不一樣,比如圖片行業(yè)對于高并發(fā)要求比較高,大視頻類業(yè)務(wù)對上傳和下載帶寬要求非常高。數(shù)據(jù)量呈指數(shù)級增長的同時,公有云數(shù)據(jù)架構(gòu)要不斷革新,才能應(yīng)對未來數(shù)據(jù)爆發(fā)的增長。