|
存力即數(shù)據(jù)存儲(chǔ)能力 蘊(yùn)藏著巨大的發(fā)展機(jī)會(huì) 【全球存儲(chǔ)觀察 ｜ 熱點(diǎn)關(guān)注】 2023年，全球被ChatGPT的熱潮席卷，擁抱AIGC的創(chuàng)新賽道成為眾多企業(yè)的新選擇。 全球存儲(chǔ)觀察分析指出，影響AIGC發(fā)展的三大因素也日益凸顯，即算力、存力與運(yùn)力，算力即計(jì)算能力；存力即數(shù)據(jù)存儲(chǔ)能力；運(yùn)力即網(wǎng)絡(luò)運(yùn)載能力。而其中令業(yè)界越來越重視的存力，蘊(yùn)藏著巨大的發(fā)展機(jī)會(huì)。 事實(shí)上，隨著AI行業(yè)應(yīng)用落地不斷加速，也加快了新數(shù)據(jù)的暴漲。來自全球?qū)I(yè)分析機(jī)構(gòu)IDC統(tǒng)計(jì)分析指出，到2027年，全球數(shù)據(jù)圈將達(dá)到291ZB。更大規(guī)模的數(shù)據(jù)存儲(chǔ)潛力值得挖掘，這也預(yù)示著在數(shù)字經(jīng)濟(jì)的下一步發(fā)展中，重視數(shù)據(jù)存力的行業(yè)企業(yè)才更有可能在新賽道中勝出。 擁抱AIGC，實(shí)現(xiàn)更好的數(shù)據(jù)存力，作為全球領(lǐng)先的數(shù)據(jù)存儲(chǔ)解決方案提供商，希捷科技為我們指明了未來發(fā)展的方向。 對(duì)于這樣一家專業(yè)而發(fā)展歷史悠久的存儲(chǔ)廠商，帶給業(yè)界的觀察與建議，還是十分值得關(guān)注的。畢竟在數(shù)據(jù)存儲(chǔ)行業(yè)中，希捷科技有著40多年的發(fā)展歷史，全球存儲(chǔ)交付量超4ZB，數(shù)據(jù)早已成其為發(fā)展的DNA。 大容量與高性能， 對(duì)AIGC存力重要性不分伯仲 2023年9月13日，在2023開放數(shù)據(jù)中心（ODCC）大會(huì)間隙，希捷科技中國區(qū)產(chǎn)品線管理總監(jiān)劉嘉接受媒體采訪時(shí)強(qiáng)調(diào)指出，大容量與高性能已經(jīng)逐漸成為AIGC存力需求的兩大發(fā)展趨勢。
那么，希捷科技到底如何看待AIGC下的數(shù)據(jù)存儲(chǔ)的大容量與高性能發(fā)展趨勢呢？ 一方面，大容量存儲(chǔ)需求將會(huì)迅速增長。大容量存儲(chǔ)源自數(shù)據(jù)海量產(chǎn)生，在AI場景下產(chǎn)生的數(shù)據(jù)相比以前正在發(fā)生很大的改變。回顧一下AI發(fā)展歷程，我們不難發(fā)現(xiàn)，無論是機(jī)器學(xué)習(xí)，還是深度學(xué)習(xí)，或者是強(qiáng)化學(xué)習(xí)，以及當(dāng)前火熱的AIGC（生成式AI），驅(qū)動(dòng)這些AI技術(shù)出現(xiàn)前所未有發(fā)展的原動(dòng)力離不開數(shù)據(jù)。為此，在AI技術(shù)實(shí)現(xiàn)突破之時(shí)，往往離不開數(shù)據(jù)采集、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)分析等一系列的數(shù)據(jù)驅(qū)動(dòng)，這也是AI的發(fā)展基礎(chǔ)。 在ChatGPT被業(yè)界熱議之時(shí)，大家的目光聚焦在了數(shù)萬顆GPU芯片上，固然ChatGPT能成為當(dāng)今火遍全球的頂流大模型，自然少不了其背后的超強(qiáng)AI算力，然而，在大規(guī)模數(shù)據(jù)進(jìn)行訓(xùn)練的過程中，更少不了與之匹配的分布式超強(qiáng)存儲(chǔ)。業(yè)界盛傳，ChatGPT算法模型包括了1750億參數(shù)，其預(yù)訓(xùn)練的數(shù)據(jù)量達(dá)45TB，未來模型參數(shù)和數(shù)據(jù)量也將隨著ChatGPT迭代不斷倍增。模型訓(xùn)練質(zhì)量越高，對(duì)數(shù)據(jù)集要求越大，需要的文件數(shù)量就越大，滿足億級(jí)文件數(shù)量的存儲(chǔ)需求是常態(tài)。 當(dāng)前AI產(chǎn)生的數(shù)據(jù)更多集中在文本、語音、圖像等方面，隨著大模型的技術(shù)升級(jí)，未來在視頻方面也會(huì)產(chǎn)生大量的AI數(shù)據(jù)。隨著數(shù)據(jù)訓(xùn)練的強(qiáng)化與推進(jìn)，以及大模型走向行業(yè)普及化，大模型用戶的數(shù)據(jù)和語言數(shù)據(jù)積累的規(guī)模也將越來越大，這對(duì)存儲(chǔ)容量需求也將越來越大。為此，AI的技術(shù)創(chuàng)新，必然會(huì)持續(xù)推動(dòng)大規(guī)模硬盤需求的增長。可以預(yù)見，未來AIGC存力的需求不亞于當(dāng)前對(duì)于GPU的AI算力需求。 另一方面，高性能存儲(chǔ)也是剛需。當(dāng)業(yè)界都聚焦在AIGC發(fā)展之路上，自然對(duì)于大模型訓(xùn)練效果也有著更快更好的要求，高性能存儲(chǔ)可以支持高性能計(jì)算平臺(tái)的訓(xùn)練負(fù)載，作為數(shù)據(jù)存儲(chǔ)基石，硬盤部件也同樣需要實(shí)現(xiàn)更高性能。這是關(guān)系A(chǔ)IGC應(yīng)用的一整個(gè)數(shù)據(jù)鏈條的高效整合。 在實(shí)際AIGC應(yīng)用中，往往對(duì)存儲(chǔ)性能要求更高。比如自動(dòng)地生成圖片、視頻，修改圖片、視頻，其過程需要高性能存儲(chǔ)來支持，實(shí)現(xiàn)用戶更高效的AIGC應(yīng)用體驗(yàn)。只要是嘗試過ChatGPT、GPT4的業(yè)界朋友，都知道它能順暢秒級(jí)完成文本問答，對(duì)其處理數(shù)據(jù)的速度還是滿意的，其背后自然也需要大容量的存儲(chǔ)來支撐其數(shù)億參數(shù)和中間結(jié)果。 很顯然，存力業(yè)已成為了AIGC發(fā)展的基石。通過大規(guī)模數(shù)據(jù)進(jìn)行訓(xùn)練就必須有大容量存儲(chǔ)來支撐，而要獲得更高效的訓(xùn)練結(jié)果和更佳的應(yīng)用體驗(yàn)，就必須要有高性能存儲(chǔ)來實(shí)現(xiàn)。大容量與高性能，對(duì)AIGC存力的重要性不分伯仲。 方向找對(duì)了， 更需突破性存儲(chǔ)技術(shù)去實(shí)現(xiàn) 實(shí)現(xiàn)AIGC更好的數(shù)據(jù)存力，找對(duì)了方向確實(shí)非常重要，更重要的是需要突破性存儲(chǔ)技術(shù)去應(yīng)對(duì)挑戰(zhàn)，才能實(shí)現(xiàn)更好的數(shù)據(jù)存儲(chǔ)理想，實(shí)現(xiàn)我們需要的數(shù)據(jù)價(jià)值。 不過，影響硬盤容量的兩個(gè)關(guān)鍵變量在于：要不選擇增加更多的碟片，或者選擇提高磁記錄的密度。只是采取在增加更多的碟片的技術(shù)道路上尋求發(fā)展，同時(shí)會(huì)增加原材料、零部件、工具和人工等BOM標(biāo)準(zhǔn)成本，碟片更多也會(huì)順帶增加功耗。 對(duì)于熱輔助磁記錄（ HAMR ）技術(shù)并不陌生的業(yè)內(nèi)人士或許都清楚，提升磁密度對(duì)于存儲(chǔ)硬盤容量升級(jí)意義重大。為此，希捷科技一直以來尋求在HAMR技術(shù)上實(shí)現(xiàn)不斷的突破。這不僅對(duì)于提升容量更加有效，而且使得硬盤設(shè)計(jì)更好優(yōu)化。 HAMR就是在磁盤上采用一種新型的介質(zhì)磁技術(shù)，在保持磁穩(wěn)定和熱穩(wěn)定情況下，讓數(shù)據(jù)位變得比過去更小且密度更高。為了寫入新數(shù)據(jù)，連接到每個(gè)記錄磁頭的小型激光二極管會(huì)瞬間加熱磁盤上的一個(gè)小點(diǎn)，從而使記錄磁頭每次翻轉(zhuǎn)單個(gè)位的磁極性，進(jìn)而達(dá)到寫入數(shù)據(jù)的目的。據(jù)希捷科技的官方資料顯示，每個(gè)位會(huì)在一納秒內(nèi)完成加熱并冷卻，因此HAMR激光器對(duì)硬盤溫度或整個(gè)介質(zhì)的溫度、穩(wěn)定性或可靠性完全沒有影響。 目前， 30+TB容量的HAMR硬盤在2023年已經(jīng)開始出貨，并且正在計(jì)劃2026年實(shí)現(xiàn)50TB的HAMR硬盤亮相。 從希捷科技大容量硬盤的路線圖可以不難看出，HAMR技術(shù)帶來發(fā)展后勁還是很足，提升磁密度對(duì)于推動(dòng)硬盤產(chǎn)品的發(fā)展和增長，其意義十分重大。對(duì)于用戶來說，磁記錄密度的提升對(duì)于存儲(chǔ)TCO和可持續(xù)性的影響也必然深遠(yuǎn)，其中的技術(shù)關(guān)鍵在于增加硬盤容量的同時(shí)，而碟片數(shù)不需要增加。 在這之前，全球存儲(chǔ)觀察阿明也曾撰文分析指出，從2001年開始，希捷就開始了在HAMR技術(shù)上的研究。最終發(fā)現(xiàn)：HAMR技術(shù)可以讓存儲(chǔ)密度提升到5Tbit/in2甚至更高的水平，HDD硬盤容量會(huì)有5到10倍的增長空間，未來制造出100TB硬盤成為可能。 先進(jìn)存儲(chǔ)技術(shù)聯(lián)盟 (ASTC) 分析指出，以增加磁密度的HAMR技術(shù)，將成為下一個(gè)重要的存儲(chǔ)技術(shù)創(chuàng)新。其言外之意，下一個(gè)十年HDD大容量硬盤的市場增長或許得靠它了。 在大容量存儲(chǔ)技術(shù)突破上有HAMR技術(shù)作為后盾，在存儲(chǔ)高性能方面，希捷科技也有著MACH.2的優(yōu)異表現(xiàn)。全球存儲(chǔ)觀察分析認(rèn)為，為AIGC數(shù)據(jù)密集型應(yīng)用提供兩倍硬盤性能，這一點(diǎn)就值得關(guān)注?？梢栽诓粻奚萘康那闆r下維持服務(wù)水平，也難怪MACH.2一經(jīng)推出就走紅業(yè)界了。 希捷科技在MACH.2技術(shù)上帶來的突破性創(chuàng)新，屬于全球首款多傳動(dòng)器硬盤技術(shù)，打破了業(yè)界硬盤吞吐記錄。MACH.2通過實(shí)現(xiàn)數(shù)據(jù)流并行進(jìn)出單個(gè)硬盤，解決了性能提升需求。通過使數(shù)據(jù)中心主機(jī)能夠同時(shí)并行請(qǐng)求和接收來自硬盤兩個(gè)區(qū)域的數(shù)據(jù)，MACH.2 將每個(gè)獨(dú)立硬盤的IOPS性能提高了一倍，抵消了通常會(huì)因?yàn)槿萘刻岣叨鸬臄?shù)據(jù)可用性下降的問題。 全球存儲(chǔ)觀察分析認(rèn)為，長期以來，希捷科技一直是引領(lǐng)全球硬盤技術(shù)未來的領(lǐng)導(dǎo)者之一，在應(yīng)對(duì)AIGC全新存力的挑戰(zhàn)下，不僅專注于磁密度技術(shù)創(chuàng)新，以支持不斷增長的大容量數(shù)據(jù)存儲(chǔ)需求。而且在存儲(chǔ)性能創(chuàng)新的突破性先進(jìn)技術(shù)方面，通過MACH.2多磁臂技術(shù)不斷改善IOPS性能表現(xiàn)，降低延遲，并通過氦氣和其他更多技術(shù)創(chuàng)新舉措來滿足AIGC應(yīng)用的TCO要求。 談到這里，或許有朋友會(huì)說，HDD大容量硬盤的性能再好，怎么可以和SSD的IOPS性能比擬呢，AIGC應(yīng)用落地選擇SSD不是更好么？單分析IOPS性能，HDD大容量硬盤確實(shí)沒法和SSD比，但是在考慮價(jià)格與數(shù)據(jù)留存時(shí)間的綜合因素時(shí)，情況就不一樣了。 據(jù)劉嘉介紹，磁介質(zhì)與閃存就兩種介質(zhì)每TB的價(jià)格對(duì)比來看，依然還在1：6到1：10的區(qū)間波動(dòng)，即使SSD容量也在增加，但HDD突破性技術(shù)不斷將硬盤成本往下拉。如果用戶要考慮成本的問題，那么選擇HDD大容量硬盤必然會(huì)不斷增加。 對(duì)于AIGC應(yīng)用過程中的數(shù)據(jù)留存時(shí)間，應(yīng)該是眾多走上該賽道上的企業(yè)必須要重視的事情。在考慮數(shù)據(jù)存儲(chǔ)可靠性的同時(shí)，選擇數(shù)據(jù)留存時(shí)間更長的HDD大容量硬盤也是常理了。況且在數(shù)據(jù)備份與恢復(fù)方面，基于HDD大容量硬盤的存儲(chǔ)系統(tǒng)更為成熟。 當(dāng)然，對(duì)于大模型訓(xùn)練的實(shí)時(shí)熱數(shù)據(jù)采用SSD來存儲(chǔ)，可以獲得更高IOPS性能和低時(shí)延支持，但要考慮到數(shù)據(jù)留存時(shí)間與安全性，對(duì)于大量的近實(shí)時(shí)和歸檔的溫冷數(shù)據(jù)采用HDD大容量硬盤來存儲(chǔ)，可以獲得更好數(shù)據(jù)留存時(shí)間與安全性，以及TCO表現(xiàn)。 可見，HDD與SSD對(duì)于AIGC發(fā)展也是相輔相成的，在企業(yè)級(jí)SSD方面，希捷科技也擁有業(yè)界強(qiáng)大的企業(yè)級(jí)產(chǎn)品陣營希捷雷霆（Nytro）系列，適合SDS、高性能計(jì)算、高密度數(shù)據(jù)中心，以及當(dāng)前AIGC應(yīng)用場景。 除此之外，應(yīng)對(duì)當(dāng)今的存儲(chǔ)挑戰(zhàn)，希捷科技之前還推出了Exos CORVAULT智能存儲(chǔ)系統(tǒng)。被業(yè)界譽(yù)為裸容量超過2PB的智能“超級(jí)硬盤”，以更低的成本，存儲(chǔ)更多的數(shù)據(jù)。在Exos CORVAULT系統(tǒng)中還采用了希捷科技創(chuàng)新的ADAPT糾刪碼和自我修復(fù)ADR存儲(chǔ)技術(shù)，不僅提高了數(shù)據(jù)中心系統(tǒng)的耐用性，也對(duì)其可持續(xù)性帶來了極大的幫助。 面對(duì)AIGC應(yīng)用帶來海量數(shù)據(jù)存儲(chǔ)挑戰(zhàn)，既需要大容量與高性能的磁盤，也需要與這些磁盤協(xié)同設(shè)計(jì)的智能存儲(chǔ)系統(tǒng)。為此，從芯片到硬盤部件到存儲(chǔ)系統(tǒng)，希捷科技通過軟件與硬件的持續(xù)創(chuàng)新技術(shù)，為滿足用戶的數(shù)據(jù)存儲(chǔ)需求不斷推陳出新。 踏上AIGC未來之路， 還需持續(xù)踐行綠色存儲(chǔ)理念 隨著踏上AIGC未來之路的企業(yè)越來越多，持續(xù)踐行綠色存儲(chǔ)的理念需要倍加重視。 隨著數(shù)據(jù)圈的擴(kuò)大，數(shù)據(jù)量的爆發(fā)式增長，大家對(duì)于硬盤等存儲(chǔ)介質(zhì)的生產(chǎn)和消耗十分驚人。 為此，希捷科技早已宣布了自身的“碳中和”計(jì)劃：到2030年，在全球范圍內(nèi)使用100%可再生能源，2040年實(shí)現(xiàn)碳中和。一方面，在工廠生產(chǎn)、技術(shù)研發(fā)領(lǐng)域，希捷科技以100%使用可再生能源作為戰(zhàn)略目標(biāo)。 另一方面，在突破性技術(shù)創(chuàng)新領(lǐng)域，希捷科技憑借雙磁臂技術(shù)、HAMR技術(shù)、氦氣硬盤等，賦能數(shù)據(jù)中心的綠色、可持續(xù)發(fā)展。同時(shí)，也為業(yè)界帶來了自動(dòng)修復(fù)、硬盤重生與硬盤回收的綠色技術(shù)。ADR（自動(dòng)容量重生）技術(shù)可以主動(dòng)發(fā)現(xiàn)硬盤磁頭故障并進(jìn)行自動(dòng)化修復(fù)，減少電子垃圾。希捷已經(jīng)攜手國內(nèi)外眾多生態(tài)伙伴，通過對(duì)產(chǎn)品整體以及相關(guān)部件的回收和循環(huán)利用，創(chuàng)建可持續(xù)發(fā)展的存儲(chǔ)產(chǎn)業(yè)。2022財(cái)年希捷科技通過翻新計(jì)劃延長了一百多萬塊機(jī)械硬盤和固態(tài)硬盤的使用壽命。將這些硬盤通過翻新和重新部署實(shí)現(xiàn)回收，避免了540多公噸的電子垃圾進(jìn)入填埋場。 由此可見，在AIGC的創(chuàng)新賽道上，數(shù)據(jù)存力不僅要強(qiáng)大，具備更優(yōu)的TCO表現(xiàn)，而且還需要持續(xù)踐行綠色存儲(chǔ)理念。在希捷科技等科技巨頭的帶動(dòng)下，我們有理由相信，一個(gè)面向AIGC全新的綠色存儲(chǔ)生態(tài)圈正在形成，并進(jìn)一步得以完善中。在存力永續(xù)發(fā)展的基礎(chǔ)上，讓AI為百行百業(yè)創(chuàng)造出更多的價(jià)值。（by Aming） - END- 你 怎 么 看 ？ 歡迎文末評(píng)論補(bǔ)充！ 【全球存儲(chǔ)觀察 ｜全球云觀察 ｜阿明觀察 ｜科技明說】專注科技公司分析，用數(shù)據(jù)說話，帶你看懂科技。本文和作者回復(fù)僅代表個(gè)人觀點(diǎn)，不構(gòu)成任何投資建議。 |
|
|
