创鑫智能云端用人工智能推论芯片在AI世界评测赢得最佳能效比
由众多人工智能业界一流厂商参与的MLPerf v3.0 AI推论(Inference)效能基准测试中,AI ASIC平台领导厂商创鑫智能 (NEUCHIPS)公布其世界第一个专为数据中心推荐模型(Recommendation Model)设计的AI加速器 RecAccel N3000的测试数据,在服务器领域的能源效率(Energy efficiency)上领先AI大厂辉达 (NVIDIA),成为世界第一能效的AI加速平台,让需要高运算力的数据中心(Data Center) 与云端服务供应商(CSP)以最低的总拥有成本(TCO)实现企业永续(ESG)发展目标。
MLPerf v3.0 AI推论测试是由致力提升机器学习技术和应用的开放工程联盟MLCommons所进行。创鑫智能此次采用技钢G482-Z54服务器搭载AMD EPYC 7452 32核CPU及8张RecAccel N3000 32G PCIe加速卡执行 DLRM测试。
根据MLCommons公布的测试数据,在数据中心推荐系统领域,RecAccel N3000 系统除了展现其100%的效能扩充性(Performance Scalability)之外,在每瓦可处理1,060次查询(Queries)的评策上,能效为对手NVIDIA H100的1.7倍,高居榜首。未来计划推出的RecAccel Quad N3000 PCIe卡更能提供高达 2.2倍的卓越效能。RecAccel N3000优异的效能和TCO特性,满足了数据中心与云端服务业者对于AI应用的需求并符合ESG发展趋势。
近年来,COVID-19疫情的影响大幅改变了多数人的生活习惯和消费模式,进而引爆行销科技(MarTech)的兴起。如何提升行销效率及藉由AI模型运算提供实时、个人化的精准数据,设计更佳的消费者使用体验,已成为各大在线、线下业者所面临的最大挑战。此外,电商平台、社群媒体、影音传媒、交友软件和查找引擎的蓬勃发展,也加速了全球对推荐系统的需求,其市场每年以大约 30% 左右的复合年成长率(CAGR)快速成长,吸引全球各大厂商与新创公司参与竞逐。
「为实现量大、精准、实时且节能的人工智能运算,我们必须找到更可持续和环境友善的解决方案,这不仅仅是一个商业挑战,更是对社会责任和绿色发展的追求,」创鑫智能创始人暨董事长林永隆博士表示。「我们以具体移动证明我们对永续发展的承诺,除了在 MLPerf测试中取得最佳表现,我们还将推出专为开放运算计划(OCP)设计的DM.2模块,继续引领产业发展,提供更多协助云端服务供应商与数据中心节省成本的平台方案,并助力AI技术的繁荣与成长。」
AMD策略业务发展全球副总裁Kumaran Siva则表示:「AMD提供高效能运算产品,帮助智能系统有效管理复杂的数据集。我们非常高兴能与创鑫智能合作,藉由AMD EPYC处理器为MLPerf v3.0中的DLRM推理实现领先的效能及能耗。我们期待持续与创鑫智能协同发展与创新,为市场提供不断引领先进技术的人工智能解决方案。」
- 小螺丝到大数据:Bossard紧固件在AI服务器的应用
- AMAX引领生成式 AI 与实时运动数据革命
- 思想科技助企业加速落实 AI 应用,完整顾问服务突破创新挑战
- 首款AI心肺筛检在国际亮相!展现台湾医学影像创新实力
- 迎接后双轴转型时代 Google AI助攻台湾制造业迈向绿色企业
- 慧荣科技突破数据与功耗瓶颈 全新存储技术加速AI应用发展
- 台师大与丽台携手成立深度学习共同实验室 推动AI技术在教育与产业的应用
- 精诚软件获国科会GenAI Stars生成式AI企业应用竞赛「优质创新奖」
- 运用科技力守护民众生命财产安全 精诚集团协力宜兰县政府部署AIoT智能防灾
- 晶睿通讯AI安防解决方案 导入全新AI功能RealSight Engine
- 西门子推出下一代AI加强型电子系统设计软件
- F5与NetApp加速并简化大型语言模型AI部署
- 新思科技与台积电携手 为AI与多晶粒设计加速创新
- 友讯代理A10 Networks人工智能新蓝图 驱动可靠安全环境
- 边缘 AI:实时数据处理与自动化的革命
- 迎接AI时代:数产署与资策会运用AWS技术
携手伊云谷为企业打造黄金级竞争力 - 技嘉发表开创性的Z890主机板 展现真AI 制霸效能无极限
- 昕力信息与iKala携手拓展东南亚市场 首站支持越南制造业和金融业上云
- AI视觉释放LLM完整潜力,重塑智造管理
- Hitachi Vantara推出Virtual Storage Platform One为混合云存储提供基础