面對指數(shù)級增長的計算與存儲需求,傳統(tǒng)的計算與存儲架構(gòu)是否仍然堪用?
在IPF 2021浪潮數(shù)據(jù)中心合作伙伴大會上,浪潮集團執(zhí)行總裁、首席科學家王恩東院士指出:2020年以GPU為代表的AI加速芯片所交付的計算力總和已經(jīng)超過了通用CPU,智算成為智慧時代的核心動力。面對指數(shù)級增長的計算需求,計算技術(shù)、產(chǎn)品與產(chǎn)業(yè)也面臨著新的挑戰(zhàn),一是多元化的挑戰(zhàn),也就是計算場景的復雜、計算架構(gòu)的多元;二是巨量化的挑戰(zhàn),也就是由巨量模型、巨量數(shù)據(jù)、巨量算力及巨量應用引發(fā)的對現(xiàn)有計算機體系結(jié)構(gòu)的挑戰(zhàn)。
技術(shù)與成本的博弈
技術(shù)與成本的博弈似乎是一個永恒的話題,對于IT業(yè)來說也不例外。在計算領域,從專用處理器到通用處理器再到如今的各類針對不同場景應用的AI處理器;在存儲領域,從本地存儲到外置存儲再到分布式存儲;在存儲介質(zhì)上,從磁帶到HDD再到SSD。每一項新技術(shù)的發(fā)展都需要經(jīng)歷博弈的過程。
但這并不意味著上一代技術(shù)就失去了其存在的價值,發(fā)明于20世紀50年代的磁帶時至今日仍然有著不少的用戶;誕生于70年代的HDD而言,依舊活躍在各種規(guī)模的數(shù)據(jù)中心里;而SSD作為時代弄潮兒則正在將旗幟插滿目所能及的各個地方。研究機構(gòu)Trendfocus的數(shù)據(jù)顯示,在2020年SSD的總出貨量達到3.33億塊超越2.59億塊的HDD;在總?cè)萘糠矫鍿SD為207EB,HDD則為1ZB,約為SSD的5倍。
換言之,對應場景需求選用合適的方案才是最經(jīng)濟的選擇。計算如是,存儲亦是。
數(shù)據(jù)存儲之道 西部數(shù)據(jù)知道
人工智能的發(fā)展離不開大數(shù)據(jù)“食料”的供給,至于“加工方式”則來自于相應的算法。算法總是在不斷進化的,但待加工的“食料”卻因為儲存成本的原因在不斷流失。
IPF 2021浪潮數(shù)據(jù)中心合作伙伴大會上展出的部分西部數(shù)據(jù)企業(yè)級存儲解決方案
在IPF2021大會上,西部數(shù)據(jù)公司副總裁兼中國區(qū)業(yè)務總經(jīng)理劉鋼分享了這樣一組數(shù)字:“研究顯示預計到2024年,以HDD為代表的大數(shù)據(jù)將增長到1.62ZB,以SSD為代表的快數(shù)據(jù)333EB,兩者相加約為2ZB,而當年產(chǎn)生的數(shù)據(jù)總量將達到142ZB,這意味著僅有不到1.5%的數(shù)據(jù)會被存儲下來。”
西部數(shù)據(jù)公司副總裁兼中國區(qū)業(yè)務總經(jīng)理劉鋼
數(shù)字經(jīng)濟時代,數(shù)據(jù)是新的生產(chǎn)資料和關(guān)鍵資產(chǎn),為什么這些關(guān)鍵的資產(chǎn)和生產(chǎn)資料沒有被存儲下來?劉鋼認為其中一個重要的原因是存儲架構(gòu)和存儲技術(shù)沒有及時地跟上數(shù)據(jù)的發(fā)展。
長期以來用戶對于存儲的最主要的需求無外乎兩點:足夠大,足夠快。但同時,用戶還需兼顧采購成本及后期的使用成本。“事實上,并沒有單一的存儲設備或是存儲介質(zhì)能夠同時滿足以上條件。”劉鋼對此說道。
因此,西部數(shù)據(jù)提出“去中心化分布式存儲、分層存儲和分區(qū)存儲”的創(chuàng)新存儲架構(gòu)來幫助客戶解決當務之急。
利用去中心化分布式存儲架構(gòu)降低存儲成本,以便讓更多的數(shù)據(jù)存儲下來,留待后期加工。
進一步細化分層存儲,根據(jù)數(shù)據(jù)對存儲時延和容量的需求細化到極熱、熱、溫、冷、極冷五個層次,并采用對應的產(chǎn)品來滿足需求。
分區(qū)存儲,利用ZNS SSD進一步提升性能,同時提高可用容量減少機柜空間占用,從而進一步降低功耗開銷。
西部數(shù)據(jù)公司副總裁兼中國區(qū)業(yè)務總經(jīng)理劉鋼
劉鋼用數(shù)字來說明了西部數(shù)據(jù)能為客戶提供的價值:“為達到同樣的存儲容量,將14TB硬盤更換為18TB硬盤,則能有效的降低22%服務器數(shù)量,減少21%的能源消耗。因此,大型的互聯(lián)網(wǎng)服務商非常熱衷于采用最新最大的硬盤。對于極冷數(shù)據(jù)來說,SMR硬盤是一個很好的選擇。”
而對于以SSD為代表的快數(shù)據(jù),西部數(shù)據(jù)同樣可以提供極具競爭力的產(chǎn)品組合。這源于西部數(shù)據(jù)在企業(yè)級SSD領域三大核心競爭力:其一,西部數(shù)據(jù)與鎧俠目前占有3分之1的市場份額,其強大的產(chǎn)能是持續(xù)性供應基礎;其二,最新發(fā)布的第六代162層3D閃存技術(shù),其橫向單元陣列密度比上一代提高了約10%,晶圓尺寸減少了40%,IO性能提升了66%,在降低成本的同時滿足了不斷增長的數(shù)據(jù)處理性能需求;其三,企業(yè)級SSD的縱向集成優(yōu)勢,擁有從晶圓生產(chǎn)到控制器、固件開發(fā)的一整套產(chǎn)品集成能力,從而保證可以滿足各種客戶的需求。
攜手浪潮 構(gòu)建場景共同體
對于此次和浪潮的合作,劉鋼表示:“高速發(fā)展的人工智能在對數(shù)字經(jīng)濟產(chǎn)生巨大賦能和推動的同時,也推動整個計算產(chǎn)業(yè)往'智慧計算'方向演進,巨量模型和海量數(shù)據(jù),對算力和存儲的需求呈指數(shù)級增長。我們很高興能持續(xù)深化與浪潮的合作,結(jié)合雙方前沿科技與產(chǎn)品的獨特優(yōu)勢,協(xié)力打造出高性能、低成本、且兼具穩(wěn)定性與擴展性等特點的卓越解決方案,優(yōu)化資源配置,賦能智慧計算。未來,西部數(shù)據(jù)將與浪潮加強縱深合作,不斷以創(chuàng)新的數(shù)據(jù)存儲架構(gòu)和解決方案,應對市場多樣化的需求,并攜手生態(tài)系統(tǒng)中的各方伙伴共同推動智能產(chǎn)業(yè)的轉(zhuǎn)型與發(fā)展,為行業(yè)用戶創(chuàng)造更多價值。”
西部數(shù)據(jù)公司副總裁兼中國區(qū)業(yè)務總經(jīng)理劉鋼
面對當前的市場需求發(fā)展,浪潮在IPF 2021大會上提出了“元腦新存儲生態(tài)”:“以用戶為中心、以應用為導向”的場景共同體,意味著存儲廠商需要針對不同行業(yè)推出不同的產(chǎn)品,場景解決方案會愈發(fā)走向細分化,存儲生態(tài)所涉及的伙伴也將越來越多。
顯然,這也對所有合作伙伴提出了更高的要求。而西部數(shù)據(jù)與浪潮的產(chǎn)品與解決方案所形成的合力足以在多方面滿足客戶的需求:對于大數(shù)據(jù)需求,更高的存儲密度與容量,進一步節(jié)省了機柜占用與能耗成本;而對于快數(shù)據(jù),兼具性能與成本優(yōu)勢的多類產(chǎn)品來滿足不同需求層級的場景。文/劉禹
申請創(chuàng)業(yè)報道,分享創(chuàng)業(yè)好點子。點擊此處,共同探討創(chuàng)業(yè)新機遇!
隨著數(shù)字中國戰(zhàn)略的步步落實,大數(shù)據(jù)已經(jīng)成為錨定戰(zhàn)略定位、搶得市場先機的重要基礎元素。為彰顯行業(yè)發(fā)展現(xiàn)狀,遴選、推薦優(yōu)秀企業(yè),長城戰(zhàn)略咨詢近日在2023中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會期間,重磅發(fā)布《中國大數(shù)據(jù)獨角獸企業(yè)榜單》,根據(jù)獨角獸企業(yè)國家推薦性標準,篩選出259家2022年中國大數(shù)據(jù)(潛在)獨角獸企業(yè)
2023年6月15日至18日,2023北京健康醫(yī)療大數(shù)據(jù)論壇、醫(yī)促會華夏健康數(shù)據(jù)與數(shù)字醫(yī)學高峰論壇、第三屆中華預防醫(yī)學會腎臟病預防與控制專業(yè)委員會學術(shù)會議將同期于北京舉行。論壇以“學術(shù)引領數(shù)智健康”為主題,著眼國家戰(zhàn)略需求,聚焦前沿科技在健康醫(yī)療領域的發(fā)展與實踐,薈萃全球頂尖學術(shù)觀點,促進多方跨界融
近日,北京市科學技術(shù)委員會、中關(guān)村科技園區(qū)管理委員會公示了北京市2023年第2批科技型中小企業(yè)名單,谷器數(shù)據(jù)借助優(yōu)秀的科技自主創(chuàng)新能力成功入選。此次評價指標圍繞科研人員、研發(fā)投入、科技成果等三個維度,成功入選科技型中小企業(yè)是對谷器數(shù)據(jù)專業(yè)化發(fā)展、自主創(chuàng)新能力、產(chǎn)品技術(shù)實力的激勵與肯定??萍夹椭行∑髽I(yè)
評審寄語面向車間現(xiàn)場生產(chǎn)制造過程的數(shù)字化管理,谷器數(shù)據(jù)SupplyX·MES通過推動更有效的工廠運行和現(xiàn)場效率,提供從接收生產(chǎn)計劃到制成最終產(chǎn)品全過程的生產(chǎn)活動實現(xiàn)優(yōu)化的信息,成為新型工業(yè)化的標桿力量!近日,由中國科學院《互聯(lián)網(wǎng)周刊》、中國社會科學院信息化研究中心等機構(gòu)聯(lián)合主辦的“2023(第八屆)
在如今這個數(shù)字化轉(zhuǎn)型時代,大數(shù)據(jù)在企業(yè)發(fā)展的過程中發(fā)揮了至關(guān)重要的作用,大數(shù)據(jù)技術(shù)以更高效和有效的方式提供最好的服務,同時還可以提高生產(chǎn)力、提高客戶滿意度和更高效的智慧化運營。其中,成都四方偉業(yè)軟件股份有限公司(以下簡稱“四方偉業(yè)”)以優(yōu)秀的大數(shù)據(jù)產(chǎn)品和服務獲得了多項行業(yè)榮譽。去年,2022數(shù)博會數(shù)
把脈中國數(shù)據(jù)智能化
2023年,幾乎可以被定義為中國互聯(lián)網(wǎng)公司的“大模型元年”。ChatGPT的全球爆紅,徹底點燃國內(nèi)的大模型賽道,曾經(jīng)的“創(chuàng)業(yè)英雄”、如今的商業(yè)領袖們親自下場,接連發(fā)布生成式人工智能產(chǎn)品與大模型布局。大模型火了,沉寂許久的互聯(lián)網(wǎng)行業(yè)又有了新的“戰(zhàn)事”。同時,大模型的快速發(fā)展也改變了云市場的現(xiàn)狀,企業(yè)對
近日,數(shù)字化市場研究咨詢機構(gòu)愛分析發(fā)布了《2022愛分析·數(shù)據(jù)智能廠商全景報告》,愛分析從技術(shù)研發(fā)能力、服務客戶數(shù)量、收入規(guī)模等維度對廠商進行了全面專業(yè)的評估
2022年11月18日,首個國家級大數(shù)據(jù)產(chǎn)業(yè)創(chuàng)新賽事——2022第一屆中國大數(shù)據(jù)大賽圓滿落幕。工業(yè)和信息化部信息技術(shù)發(fā)展司數(shù)字經(jīng)濟推進處處長張建倫,中國電子技術(shù)標準化研究院副院長孫文龍出席頒獎典禮并致辭
2022年11月17日,在廈門市工業(yè)和信息化局的指導下,以“數(shù)據(jù)確權(quán)”為主題的2022數(shù)據(jù)資產(chǎn)(廈門)論壇在廈門成功舉辦。本次論壇以“數(shù)據(jù)確權(quán)”為主題,由廈門市互聯(lián)網(wǎng)域名應用服務產(chǎn)業(yè)協(xié)會和構(gòu)信網(wǎng)(公信.中國)聯(lián)合主辦
近日,國內(nèi)知名數(shù)字化市場研究咨詢機構(gòu)愛分析正式發(fā)布《2022愛分析·信創(chuàng)廠商全景報告》(以下簡稱“報告”)。報告綜合考慮企業(yè)關(guān)注度、行業(yè)落地進展等因素,遴選出在信創(chuàng)市場中具備成熟解決方案和落地能力的廠商。
10月31日下午,由數(shù)博會執(zhí)委會主辦、數(shù)據(jù)觀(北京)傳媒科技有限公司承辦、貴陽大數(shù)據(jù)交易所協(xié)辦的第四期數(shù)博思享會“實踐先行觀公共數(shù)據(jù)價值與應用”活動成功舉辦。
近日,由中國國際數(shù)字經(jīng)濟博覽會組委會主辦,中國電子技術(shù)標準化研究院、河北省工業(yè)和信息化廳承辦的“第一屆中國大數(shù)據(jù)大賽”(簡稱大數(shù)據(jù)大賽)正式啟動。
廣州光點信息科技有限公司自主研發(fā)的數(shù)據(jù)中臺產(chǎn)品GI大數(shù)據(jù)中臺V2.0產(chǎn)品是國內(nèi)率先推出符合新創(chuàng)標準的中臺產(chǎn)品,基于“大數(shù)據(jù)+AI”等技術(shù)全新打造,集數(shù)據(jù)采集、融合、治理、服務、管理為一體的旗艦平臺。
廣州光點信息科技有限公司自主研發(fā)的數(shù)據(jù)中臺產(chǎn)品GI大數(shù)據(jù)中臺V2.0產(chǎn)品是國內(nèi)率先推出符合新創(chuàng)標準的中臺產(chǎn)品,基于“大數(shù)據(jù)+AI”等技術(shù)全新打造,集數(shù)據(jù)采集、融合、治理、服務、管理為一體的旗艦平臺