克雷西 萧箫 发自 凹非寺量子位 | 公众号 QbitAI
他来了他来了，老黄带着「最强生成式AI顾问器」和一系列重磅更新来了！
在策画机图形学顶会SIGGRAPH上，老黄秘书了最新的超等芯片NVIDIA DGX GH200 Grace Hopper。
这块芯片搭载了大家最快的内存，不仅带宽每秒5TB，内存容量更是暴增接近50%来到141GB，「任何大言语模子王人能启动」。
www.zudju.com同期，英伟达还秘书了和Hugging Face的相助——
以后在Hugging Face平台上，不需要再下载ML模子我方启动，只需要几步简单操作，就能在条记本上启动大模子，有Colab内味了(即是不知说念有莫得免费版)。
至于软件更新，字里行间也全是AI。
最近的足球比赛中，明星球员XXX的出色表现引起了大家的注意。虽然他的队伍最终输了比赛，但是他的精彩表现给球迷们留下了深刻的印象。不仅在Omniverse平台中集成了一系列时下热点的AI器具，新的软件有不少亦然基于大模子打造，像ChatUSD就能帮建造者们写代码。
这亦然时隔五年，老黄再次登上SIGGRAPH的舞台。在会上，他自信满满地秘书：
生成式东说念主工智能的「iPhone时刻」，一经降临。
有网友看完发布会后感叹：
英伟达在AI硬件这方面，一经无东说念主能及了。
新芯片构成的「最强超算」来袭
这场发布会中着手抛出，亦然最引东说念主瞩见识，非「最强超算」莫属。
这台超等策画机由256块DGX GH200 Grace Hopper(简称DGX GH200)勾搭而成。
用老黄的话，这个「硕大无比」即是为AIGC时期量身打造的。
它的算力和内存容量分离达到了1E(10^15)FLOPS和144TB。
底下这张图展示了它的信得过大小(中间的黑影是老黄)。
不仅是性能优异，对比发现，性价比着实完爆CPU。
相通花1亿好意思元，拿来买CPU和GPU分离能获取什么？
CPU的话，可以买8800个x86架构的居品。
这近九千块CPU加起来，只可带动一个LLaMA 2、SDXL这么边界的AI圭表。
皇冠博彩网站功率嘛……是5兆瓦，也即是每小时5000度电。
ag官方
要是换成GPU的话，则是2500块DGX GH200。
能带动的类似边界的AI圭表一下加多到了12个，功率却裁汰到了3兆瓦。
平均到单个圭表上，需要210块DGX GH200，价钱是800万好意思元，功率则为0.26兆瓦。
而构成这个「最强超算」的DGX GH200，相通是王者级别，被称为「最强生成式AI顾问器」。
DGX GH200由Grace CPU和Hopper GPU构成。
其中Grace CPU包含72中枢，尔后者领有4P(10^12)FLOPS的算力和500GB的LPDDR5X。
此外，DGX GH200中还加入了海力士的「最快内存」HBM3e。
它的容量为141GB，带宽则高达每秒5TB，分离是H100的1.7倍和1.55倍。
(好家伙，H100王人只配当baseline了)
在DGX GH200中，CPU和GPU之间的勾搭速率是第五代PCIe的7倍。
而从单块DGX GH200到扫数这个词超等策画机的流程，主打的即是一个「叠」。
这要获利于它的多GPU高速勾搭智商。
双联体的DGX GH200，性能着实莫得耗损，平直即是单体的两倍。
将双联体的DGX GH200与BlueField-3 DPU和ConnectX-7网卡，就构成了一个「策画盒」。
通过NVLink，8个这么的「策画盒」高速勾搭，就获取了DGX构建块，总内存达到了4.6TB。
这么的构建块可以合二为一酿成新的策画盒，并最终延迟成256 GPU的责任集群Superpod。
NVLink的高速勾搭智商，让这256块GPU「就像是一块一样」责任。
至此，显卡超算的边界一经达到了本节开首老黄所展示的水平。
但这还莫得死亡——Superpod之间还能赓续勾搭。
在高速低延时的Quantum-2 Infiniband平台匡助下，超算的边界可以接着延迟……
讲到这里，老黄还玩笑说念：
要是哪天你从(某电商平台)上买显卡的期间发现了它，千万不要合计诧异！
总之，证据不同需要，诈欺DGX GH200将能构建出不同边界的、合乎AIGC时期的超等策画机。
据研讨，DGX GH200将于明(2024)年第二季度投产。
皇冠客服飞机：@seo3687还发了3个RTX新专科显卡
除了「最强生成式AI顾问器」之外，英伟达此次也推出了3款船新的责任站显卡：
RTX 5000、RTX 4500和RTX 4000。
这几款显卡均基于Ada Lovelace架构想象，现时参数一经同步英伟达官网：
固然，专科显卡售价也更贵。
其中RTX 5000售价达到4000好意思元(约合东说念主民币2.87万元)，RTX 4500售价2250好意思元(约1.6万元)，RTX 4000售价1250好意思元(约8987元)。
老黄也在发布RTX显卡时，再次说出那句经典名言：
买得越多，省得越多(the more you buy, the more you save)。
至于旧年9月发布的RTX 6000 Ada显卡，在此次大会上也推出了一个新的责任站想象：4块叠起来，搞个顶级「叠叠乐」。
这么想象的单个RTX责任站，单个可以提供5828 TFLOPS的AI性能，以及192GB的GPU内存。
除此之外，老黄还在此次大会上秘书了一个搭载L40S Ada GPU的新款OVX职业器，数据中心专用。
每台职业器搭载8块L40S Ada GPU，每块L40S包含高达18176个CUDA中枢，可以提供近5倍于A100的单精度浮点(FP32)性能。
交易所公布的港股通十大成交股显示，今日南向资金大幅净买入盈富基金31.2亿港元，同时，净买入恒生中国企业13.73亿港元，净买入中国移动10.2亿港元。净卖出腾讯控股7.2亿港元。
而从近期中资券商陆续披露的一季报业绩来看，这一逻辑也得到了数据层面的交叉验证。
比较A100，L40S微调(fine-tune)大模子的性能擢升了简略1.7倍。
(没错，A100一经被老黄用来给新硬件当对比了)
iba捕鱼具体来说，在这个OVX职业器上微调一个860M参数的大模子，现时只需要7小时就可以完成；
400亿参数的GPT-3大模子，更是只需要15个小时就能微调完成。
在渲染上，L40S性能也可以，配备了142个第三代RT中枢，可以提供212 teraflops的后光跟踪性能。
研讨L40S将于本年秋季上市。
AIGC版Colab来了，条记本跑大模子
不仅是硬件上接连抛出一系列「重磅炸弹」，软件方面英伟达也发布了多款新址品。
最初是和HuggingFace相助，把NVIDIA DGX Cloud AI整合到其中。
在HF的页面中，一键就能让模子在云上转移启动。
英伟达科学家范麟熙(Jim Fan)怡悦地秘书了这一音书，还露馅其中使用的每个节点王人是8个H100或A100。
除了与HF相助，英伟达还推出了我方的Workbench平台。
通过勾搭云表职业，用条记本电脑就能跑大模子。
现场还播放了通过Workbench跑SDXL的演示视频。
欧洲杯赛程图片
在Jupyter中，演示者让SDXL画一个「玩物老黄」。
此时的SDXL还不知说念「玩物老黄」是个啥玩意儿。
于是演示者现场用8张图对模子进行了微调。
微调后从头绘图的作品，是不是有那味了？
除了上述两款大模子启动器具，英伟达还推出了最新版的企业软件平台NVIDIA AI enterprise 4.0。
软件包的数目达到了4500个，还少见以万计的关连依赖，何况安全可靠。
谷歌、微软、亚马逊、甲骨文等英伟达相助方王人会在我方的云平台中集成这项职业。
「东说念主类将成为一门新的编程言语」
除此之外，英伟达的策画机图形与仿真模拟平台Omniverse，也秘书了一系列新证据。
一方面，更多AI器具可以平直在Omniverse内部调用了。
包括对话式AI变装创建器具Convai、高保真AI动捕器具Move AI、AI低资本制作CG器具CGWonder Dynamics在内，一系列流行AI器具，现时王人一经通过OpenUSD集成到Omniverse中。
就连Adobe，也策画将Adobe Firefly行动API，提供在Omniverse中(即是揣摸会收费)。
另一方面，英伟达还将生成式AI手艺和OpenUSD辘集，推出了一些好用的AI器具。
举例ChatUSD，即是一个基于NVIDIA Nemo框架大模子Copilot，不仅可以恢复建造者关连USD的问题，还能襄理生成Python-USD代码。
又举例DeepSearch，亦然一个基于大模子的新器具，基于文本或图像输入，可以快速对数据库进行3D语义搜索。
体育彩票排列三走势图360在此次大会上，老黄先是转头了我方当年所作念的「正确决定」——用AI重塑CG，为AI从头发明GPU。
随后，他对将来AI行业的发展作念了踊跃的研讨：
将来，着实扫数事物的前列王人会有一个大言语模子。「东说念主」，将成为一种新的编程言语。
诱惑以工场为例，老黄认为，将来的工场将会由软件和机器东说念主来「主管」。
像汽车这么的居品，自己即是机器东说念主，是以出产汽车的工场，将会呈现出机器东说念主制造机器东说念主的地方。
看来，乘大模子东风速即崛起的英伟达，此次是简直要ALL IN生成式AI了。
参考勾搭：[1]https://www.anandtech.com/show/20001/nvidia-unveils-gh200-grace-hopper-gpu-with-hbm3e-memory[2]https://twitter.com/DrJimFan/status/1688954935248027648[3]https://tehcrunch.com/2023/08/08/nvidia-ceo-we-bet-the-farm-on-ai-and-no-one-knew-it[4]https://www.youtube.com/watch?v=3qSQjRaseos