Pure Storage 推出新型存儲平臺 FlashBlade//EXA,旨在解決 AI 工作負(fù)載中的元數(shù)據(jù)挑戰(zhàn)。該平臺基于 FlashBlade 基礎(chǔ)架構(gòu),通過獨(dú)立擴(kuò)展數(shù)據(jù)和元數(shù)據(jù)來提高并發(fā)性能。它支持多模態(tài) AI 模型,初始讀取性能可達(dá) 10TB/秒。該平臺兼容其他廠商的數(shù)據(jù)節(jié)點(diǎn),同時利用 Pure Storage 自身技術(shù),為企業(yè)級 AI 應(yīng)用提供靈活、高性能的存儲解決方案。
隨著AI基礎(chǔ)設(shè)施市場的爆發(fā)式增長,數(shù)據(jù)管理和存儲對企業(yè)實(shí)現(xiàn)AI投資價值變得至關(guān)重要。企業(yè)面臨的挑戰(zhàn)包括數(shù)據(jù)分散、傳統(tǒng)架構(gòu)限制和混合云環(huán)境的復(fù)雜性,需要靈活、可擴(kuò)展的存儲解決方案來有效管理和提取數(shù)據(jù)價值。
IBM 為其長期存在的并行文件系統(tǒng) Storage Scale 添加了內(nèi)容感知功能,增強(qiáng)了其檢索增強(qiáng)生成(RAG)能力。這一升級支持 Nvidia 的 AI-Q 藍(lán)圖和 NeMo Retriever 微服務(wù),可以從多種數(shù)據(jù)源中提取信息,并自動更新向量數(shù)據(jù)庫。這項(xiàng)技術(shù)將嵌入到 IBM Fusion 的下一次更新中,預(yù)計(jì)在第二季度正式發(fā)布。
隨著人工智能、物聯(lián)網(wǎng)和邊緣計(jì)算的進(jìn)步,數(shù)據(jù)創(chuàng)建的擴(kuò)展正在重塑數(shù)據(jù)中心的存儲管理方式。雖然固態(tài)硬盤(SSD)在速度討論中占主導(dǎo)地位,但成本效益的可擴(kuò)展性仍依賴于創(chuàng)新的硬盤驅(qū)動器(HDD)技術(shù)。對于尋求增強(qiáng)存儲需求的組織,疊瓦式磁記錄(SMR)可以在與傳統(tǒng)磁記錄(CMR)HDD相比,提供高達(dá)20%的額外存儲容量,且?guī)缀鯖]有額外成本。隨著超大規(guī)模數(shù)據(jù)中心的采用加速,SMR可以幫助實(shí)現(xiàn)可持續(xù)性和存儲經(jīng)濟(jì)學(xué)的必要基準(zhǔn)。
Hyperspace是一款為Mac用戶設(shè)計(jì)的創(chuàng)新應(yīng)用,能夠在不刪除文件的情況下釋放磁盤空間。由知名程序員John Siracusa開發(fā),這款應(yīng)用利用Mac系統(tǒng)的特殊功能,為用戶提供了一種簡單、無風(fēng)險的方式來優(yōu)化存儲空間。Hyperspace既適用于內(nèi)置存儲,也支持使用APFS的外接存儲設(shè)備,為用戶提供了靈活的存儲管理選擇。
AI 的發(fā)展與數(shù)據(jù)存儲息息相關(guān)。高質(zhì)量的數(shù)據(jù)是 AI 算法的基礎(chǔ),而有效的存儲技術(shù)則是數(shù)據(jù)管理的關(guān)鍵。AI 與存儲技術(shù)相互促進(jìn):AI 推動存儲創(chuàng)新,存儲技術(shù)支持 AI 發(fā)展。未來,存儲密度提升將滿足 AI 對大容量存儲的需求,同時 AI 也將助力存儲設(shè)計(jì)優(yōu)化,形成良性循環(huán)。
微軟在其 Azure 公有云服務(wù)中為基于磁盤的文件存儲提供了更可預(yù)測的計(jì)費(fèi)成本,類似于其 SSD 文件存儲的配置風(fēng)格,作為其按需付費(fèi)系統(tǒng)的替代方案。Azure 現(xiàn)有兩種文件存儲層級:使用快速 SSD 存儲的高級層和使用硬盤驅(qū)動器(HDD)的標(biāo)準(zhǔn)層。標(biāo)準(zhǔn)層現(xiàn)已推出 Provisioned v2 計(jì)費(fèi)模型,用戶可以單獨(dú)為文件共享配置容量、IOPS 和吞吐量,提供更高的靈活性和可預(yù)測性。
本文討論了 AI 訓(xùn)練和推理中文件存儲與對象存儲的應(yīng)用。VDURA CEO Ken Claffey 認(rèn)為兩者都有其作用,不應(yīng)簡單地選擇其一。VDURA 提供了一種混合解決方案,結(jié)合了對象存儲的可擴(kuò)展性和文件系統(tǒng)的高性能,以滿足 AI 工作負(fù)載的多樣需求。文章強(qiáng)調(diào)了在 AI 基礎(chǔ)設(shè)施中平衡不同存儲技術(shù)的重要性。
VDURA 將在即將舉行的能源高性能計(jì)算會議上展示其新一代數(shù)據(jù)平臺。該平臺旨在通過更快的數(shù)據(jù)處理、更高的數(shù)據(jù)持久性和更易用的混合環(huán)境,加速能源行業(yè)創(chuàng)新。VDURA 的混合架構(gòu)結(jié)合了 HDD 和 SSD 的優(yōu)勢,為能源公司提供了優(yōu)化運(yùn)營成本和工作負(fù)載速度的解決方案。
超大型 AI 語言模型訓(xùn)練正轉(zhuǎn)向使用對象存儲而非文件存儲。這種轉(zhuǎn)變源于 AI 模型訓(xùn)練的特殊需求和對象存儲的優(yōu)勢。對象存儲在數(shù)據(jù)攝取、準(zhǔn)備、模型訓(xùn)練和部署等階段都表現(xiàn)出獨(dú)特優(yōu)勢,能更好地滿足大規(guī)模并行計(jì)算和海量數(shù)據(jù)處理的需求,同時具有更高的成本效益和可擴(kuò)展性。
RiverMeadow 升級其平臺,支持將 Pure Storage 的本地 Evergreen 存儲即服務(wù)擴(kuò)展到云端。用戶現(xiàn)可通過 RiverMeadow 訪問 Azure、AVS 和 AWS 上的 Pure Cloud Block Store,實(shí)現(xiàn)工作負(fù)載遷移優(yōu)化,提高云存儲靈活性和彈性,同時降低成本。兩家公司的合作旨在為企業(yè)提供更高效、可擴(kuò)展的云遷移解決方案。
生成式人工智能正如洪水般席卷IT世界,對存儲技術(shù)產(chǎn)生深遠(yuǎn)影響。從內(nèi)存-存儲接口到更高層面,AI正在改變塊存儲、文件存儲和對象存儲的方方面面。本文分析了生成式AI改變存儲世界的六大方式,包括GPU直連、存儲介質(zhì)創(chuàng)新、數(shù)據(jù)庫向量化、數(shù)據(jù)保護(hù)等方面,展望了存儲技術(shù)在AI時代的發(fā)展趨勢。
Datafy.io 作為一家專注于降低 Elastic Block Storage (EBS) 成本的 FinOps 創(chuàng)業(yè)公司,推出了自動化的 EBS 優(yōu)化引擎。該引擎能夠根據(jù)實(shí)際使用情況自動調(diào)整 EBS 卷大小,幫助客戶僅為所需資源付費(fèi),從而實(shí)現(xiàn)顯著的成本節(jié)約。Datafy 的解決方案易于使用,無需開發(fā)人員參與部署,為企業(yè)提供了一種簡便高效的 AWS 存儲成本管理方式。
DDN獲得3億美元投資,計(jì)劃將其在超級計(jì)算領(lǐng)域的領(lǐng)先優(yōu)勢轉(zhuǎn)化為AI存儲解決方案。該公司正在調(diào)整其高性能計(jì)算產(chǎn)品線以適應(yīng)AI工作負(fù)載的需求,并承諾將于2月20日發(fā)布重大公告。這筆投資反映了AI基礎(chǔ)設(shè)施市場的快速增長和投資熱潮。