立捷速能力推Weka高速存储系统 终结AI运算瓶颈 智能应用 影音
Digikey
Event

立捷速能力推Weka高速存储系统 终结AI运算瓶颈

  • 侯冠宇台北

立捷速能专业服务团队拥有Weka原厂认证技术专家(Weka Certified Technical Expert),提供客户售前产品谘询及售后专业服务。DIGITIMES摄
立捷速能专业服务团队拥有Weka原厂认证技术专家(Weka Certified Technical Expert),提供客户售前产品谘询及售后专业服务。DIGITIMES摄

毫无疑问,人工智能(AI)是当今最具影响力的科技,综观各行各业的数码转型旅程,乃至元宇宙、自驾车等关键新技术,皆与AI息息相关。因此越来越多企业积极投资AI,但大多侧重于高速GPU布局,至于网络、存储仍沿袭旧有架构,导致数据输送不够快,因而衍生AI运算瓶颈。

鉴于此,向来以「数据前进的艺术家」自居的立捷速能,于去年(2021)成为Weka台湾总代理商,期望将全球最快的平行档案系统WekaFS推广至国内高科技、制造、金融、医疗…等任何具有AI运算需求的垂直领域。立捷速能销售支持经理朱善文说,以2019年IO500评测数据而论,针对Bandwidth指标,WekaFS展现27.05GiB/s佳绩,反观当时「最强超级电脑」所采用的他牌平行档案系统,仅有9.84GiB/s表现;WekaFS的数据交换效率之高、由此可见一斑。

新架构 X 新技术,为AI加速供应数据养分

朱善文强调,Weka是2014年成立的年轻企业,没有历史包袱,易于为WekaFS注入许多独特优势。首先它是针对AI/ML、HPC需求而全新设计的高速存储系统,采用自创的POSIX Driver通讯协定,自创的存储控制软件,不会出现NFS或SMB等传统架构经常可见的瓶颈。其次它是软件定义存储系统,并未綑绑硬件,用户可利用标准x86服务器、超融合系统甚或云端虚拟机来建立存储节点。

再来更重要的是,Weka聚焦支持当前最先进的技术,包括最快的存储媒体NVMe Flash,最快的网络架构200Gb/s InfiniBand(另可支持100GbE以太网络),以及大幅提升存储与计算节点之间数据传输速度的NVIDIA GPUDirect Storage。事实上,已有不少存储系统同样支持NVMe或GPUDirect,但差别在WekaFS奠基于专为新技术而优化设计的新架构,并非旧瓶装新酒,故能100%发挥尖端技术应有的带宽与效能;反观一般存储系统、甚至其他平行档案系统,都碍于旧架构限制,无法顺利展现NVMe该有的速度感。

三大利基助阵,让企业轻易增强AI战力

朱善文归纳,大致上来说WekaFS拥有三大利基。一是「简单」,原厂Weka针对WekaFS产品设计,采取友善的包装方式,也提供参考架构做为指引,让用户轻易透过x86服务器加以安装与操作,不需借助资深技术专家。

二是「快速」,这部份的能力承自于前述提到的最佳化架构,与NVMe或GPUDirect等先进科技相互辉映;据悉某半导体大厂为发展3纳米和5纳米制程,须力求加快大量数据的处理速度,因而曾尝试导入多个不同存储系统,但都无法避免GPU运算瓶颈,直到引进WekaFS,才让种种难题迎刃而解。

第三点则是「扩充能力」。WekaFS以6个节点为最基本的架构,用户可透过横向扩展方式增加节点,加到上千个、无限多都不成问题;且因各节点都有自己的网络、自己的控制器,所以每新增一个节点,无论容量、效能皆会同步提升。

朱善文重申,随着各产业AI运算需求水涨船高,因此敢于投资诸如NVIDIA DGX A100等高速运算平台的企业,确实越来越多;与此同时,企业亦应一并布局高速网络、高速存储,才能全面满足AI工作负载的运作需求,有效避免读数据慢、运算慢、回写数据也慢的盲点,让宝贵的GPU资源发挥应有的AI生产力。

关键字