
Nvidia
在今年Computex期间,Nvidia正式推出了订阅制的DGX SuperPOD超级电脑丛集云端运算新服务,让企业用户不用购买整套超级电脑丛集,就能使用其提供的破百Peta级的运算能力,来训练庞大的AI应用模型,该服务预计今夏稍晚推出上线,但仅开放北美用户先采用。另外该公司也宣布将扩大Nvidia Certified认证适用范围,不只是内含GPU的AI服务器,还包括了内含DPU的设备,明年更要扩大提供基于Arm架构的设备认证。
DGX SuperPOD是Nvidia去年所推出最新的AI超级电脑丛集系统,在单一模组整合了至少20台DGX A100建立高效能运算丛集,其AI运算效能可达100 petaFLOPS,甚至最高可扩充至 700 petaFLOPS运算效能。但其价格也相当昂贵 ,一套系统至少数百万美元起,门槛与进入成本很高,因此,迄今只有少数大型企业才能够采用。
新推出订阅制的DGX SuperPOD云端运算服务,则是对于有超大型AI模型训练需求的AI新创或中小型企业,带来了一些新的机会,现在也能用它提供的高效能运算,加快完成如大型自然语言AI模型的训练与应用开发,加速将服务推向市场。
至于订阅收费机制,Nvidia表示,未来将采用按月计费方式,每月收费90,000美元起,相当于台币约240万元,大约是单机DGX A100的一半价格,但是具备更高算力及扩充能力,甚至不只能整套租,企业用户一次也可以DGX SuperPOD里一部分运算丛集做租用,而不用租整套丛集,在节省成本的同时,也有助于降低进入门槛。
另外,所有硬件设备皆托管于Equinix 云端资料中心,该丛集运算服务也使用了储存厂商NetApp提供的全快闪储存设备,作为大量资料储存和管理之用。DGX SuperPOD丛集云端运算服务,预计今年夏季稍晚推出上线。目前已开放早期测试,但仅在北美提供。
为方便管理DGX SuperPOD运算丛集,Nvidia还推出了一个Base Command软件管理新界面,不仅提供多租户、多团队AI应用开发的支援,企业用户在使用与调度DGX SuperPOD资源用于AI开发也更容易,同时简化SuperPOD的丛集管理。Base Command界面操作起来相当容易,不仅提供GUI界面,还配备了Jupyter Notebook等各种工具,能使用专属Registry和训练模型,以及还整合AI生命周期人员协作的MLOPs API。另外还提供一个监控和报告的视觉化仪表板,方便使用者管理。
此外,Base Command界面本身也可支援在AWS和Google两大公有云平台上来使用,让用户用单一界面就能够提交AI任务,并且跨本地端或多云混合云。
另外,Nvidia这次还发起新的Nvidia Certified硬件认证专案计划,让系统制造商可以参考它所提供的设计蓝图,开发出符合Nvidia认证的AI专用服务器或系统,并提供官方认证,作为企业未来在添购AI服务器设备时可参考的依据。
除了有通过其认证的AI硬件,在AI软件方面,Nvidia也发布Nvidia AI Enterprise软件整合平台,主要是将该公司多年来推出的众多AI软件、开发工具或框架 ,整合到单一平台,让企业更容易用它做视觉或语音AI应用开发。
进一步来看,该平台整合了许多企业常用AI软件或开发工具,像是在基础架构管理优化工具方面,提供了Nvidia vGPU、Nvidia Magnum IO、Nvidia Cuda-X AI、Nvidia DOCA等软件堆叠或开发工具。而在AI与资料科学应用方面,也整合了如Nvidia Triton Inference Server、Nvidia TensorRT函式库元件与GPU加速函式库Rapids等。还有加入各种主流AI框架,如TensorFlow、PyTorch,以及Nvidia Transfer Learning Toolkit等都包含在内。该软件平台亦可架构在通过Nvidia认证的AI服务器上,并支援完整VMware vSphere虚拟化环境。
除了提供通过Nvidia认证的AI设备HGX、EGX,Nvidia表示,接下来,更将其认证适用范围,扩大涵盖到内含有DPU的服务器设备,预计将于今年秋天开始提供,包括Asus、Dell、技嘉、云达、Supermicro都将推出搭载Bluefield-2 DPU的服务器产品,目前都与Nvidia正在展开合作,以取得其认证,另外不只x86架构,Nvidia明年也扩大提供基于Arm架构的设备认证。
由于Nvidia的Arm CPU将于2023年推出,为了早一步建立生态系,Nvidia也与技嘉合作,宣布推出以Arm为基础的加速运算开发套件,除了提供软件,硬件部分则内含有Arm CPU与GPU,可提供全球250万名CUDA平台开发者,来提前针对Arm架构运算环境,进行相关开发与应用测试。
相关文章
YouTube更新违反规定政策,提升惩处透明度和一致性2023-12-31 14:00:52
传苹果将把中国iCloud正式交给本地化经营 苹果手机icloud换区存储操作2023-12-27 18:34:43
刘德华代言什么手机?刘德华成华为Mate 60 RS非凡大师华为5G新手机代言人2023-09-26 21:55:08
WebOS新系统:Palm Pre手机最新款高价登港2023-06-23 15:39:14
帮助企业组织对抗勒索软件,资安通报机构设立防护专区,可协助事前、事中与事后因应2023-06-22 09:36:10
蔚来全系产品降价3万 取消免费换电 换一次电池180元2023-06-12 17:27:49
电商平台三巨头开打最大规模折扣 价格战再次打响2023-03-05 18:58:40
爱立信节省成本裁员四千人 爱立信全球员工总数五分之一2023-02-24 22:27:29
蜜芽关停近况,八位数重金买三字顶级新域名mia.com也关闭2023-02-23 16:18:14
联想CEO杨元庆:联想集团需要裁员32%削减部分业务支出2023-02-18 12:45:25
蓝色光标2022营收亏损18亿 客户预算减少明显2023-02-18 12:40:08
三星工厂或将80%生产转至越南 因本地劳动力成本上升2023-02-17 23:09:16
香港八达通卡如何激活?没用失效过期余额怎么办2023-02-17 18:34:51
中兴通讯被曝将裁员20% 称只裁国外的2023-02-17 18:33:26
苹果新iPhone15Pro手机终于改用USB-C(火牛)数据线??Lightning充电接口退出2023-02-17 16:57:22
突发!蓝色光标曾为中国民企500强龙头 如今业绩亏损断崖下跌2023-02-16 14:31:19
三星发布自家carplay车载中控系统 Car Mode for Galaxy 可以连接carplay吗?2023-02-14 00:53:17
Opera浏览器宣布集成ChatGPT 一键生成网页内容摘要2023-02-14 00:32:08
谷歌google计划重返进入中国市场?但结果可能令你失望2023-02-13 16:57:15
Zoom紧急裁员1300人 佔员工总数15%2023-02-08 14:59:11
最新资讯
炒港股要补交多少税?我也接到催交补税特别行动的电话了2025-07-23 17:36:43
淘宝天猫仅退款属于诈骗吗?淘宝天猫开始部分取消仅退款2024-10-01 13:01:28
哈啰app借钱|哈啰借钱app下载安装免费小小上当和电话骚扰2024-10-01 11:22:38
白嫖党|山西大同大学学生网购申请“仅退款”被拒骂客服一小时2024-09-27 09:10:44
北大数学教授袁新意《姜萍事件的疑点分析》点评姜萍板书 阿里巴巴竞赛受质疑2024-06-28 10:07:40
手机
中国11月手机出货量增34% 5G手机出货量2709.2万部2023-12-28 19:27:57
荣耀发布新一代旗舰荣耀Magic5系列,新款上市价格分期0首付3999元起2023-03-06 16:12:32
美国商务部指违禁,长江存储被美国拜登制裁名单面临停工裁员2023-02-17 18:41:53
苹果Apple iOS车载系统CarPlay支持哪些更多汽车品牌2023-02-02 17:33:27
香港去哪买三星手机回来吗? 买香港便宜售价手机市场地点和网站2023-02-02 11:03:11
数码
华为5G芯片正式亮相:预示华为将发首款5G手机2023-08-31 13:22:33
腾讯传计划放弃虚拟现实VR硬件计划2023-02-17 23:32:30
三星手机份额大跌!三星手机中国市场份额变化国内仅剩3%2023-02-01 17:06:15
三星手机份额大跌在中国没市场了!国内市场占有率仅剩1%国外比苹果销量高2023-02-01 16:59:53
vivo发布2022 vivoNEX手机极简易浏览器下载:简洁流畅无广告!2022-12-02 17:29:30
科技
B站怎么炸崩了哔哩哔哩服务器今日怎么又炸挂了?技术团队公开早先原因2023-03-06 19:05:55
苹果iPhoneXS/XR手机电池容量续航最强?答案揭晓2023-02-19 15:09:54
华为荣耀两款机型起内讧:荣耀Play官方价格同价同配该如何选?2023-02-17 23:21:27
google谷歌原生系统Pixel3 XL/4/5/6 pro手机价格:刘海屏设计顶配版曾卖6900元2023-02-17 18:58:09
科大讯飞同传同声翻译软件造假 浮夸不能只罚酒三杯2023-02-17 18:46:15