助力AI創新,浪潮信息推出爲大模型專門優化的分布式全閃存儲

科技通有億點 2024-05-12 01:43:15

(全球TMT2024年5月10日訊)浪潮信息近日發布爲大模型專門優化的分布式全閃存儲AS13000G7-N系列,這一系列産品基于浪潮自研的分布式文件系統和新一代數據加速引擎DataTurbo。通過技術創新,如盤控協同、GPU直訪存儲、全局一致性緩存等,爲AI大模型的數據歸集、訓練及管理提供有力的存儲支持。

面對大模型時代對存儲挑戰,包括數據准備階段的高效篩選清洗、模型訓練階段海量小文件處理需求以及數據歸檔與管理複雜度等問題,AS13000G7-N通過硬件和軟件上的協同創新滿足了這些嚴苛需求。例如,在硬件方面采用了2U24盤位配置高容量NVMe SSD,並支持400 Gb網卡;在軟件方面,則利用其分布式元數據服務提升小文件讀寫性能,並通過數控分離架構降低IO訪問時延。

此外,AS13000G7-N系列還引入了多項技術革新來保障大模型高效訓練。例如DataTurbo數據加速引擎優化緩存處理和空間均衡,並結合GPU直通存儲技術顯著提升讀寫帶寬和減少加載時間。這些創新不僅提高了模型訓練效率和質量,還降低了空間損耗率並保護客戶投資。總體而言,AS13000G7-N能夠有效應對當前AI領域中關于大規模參數處理與管理所遇到的挑戰,並推動業務智能化變革。

0 阅读:0

科技通有億點

簡介:感謝大家的關注