作者pl132 (pl132)
看板Tech_Job
标题[新闻]低价挑战 NVIDIA!晶片大神 Jim Keller 曝
时间Tue Jul 16 20:25:44 2024
低价挑战 NVIDIA!晶片大神 Jim Keller 曝设计关键是「舍弃 HBM」
https://tinyurl.com/23cvjvhj
传奇晶片设计师 Jim Keller 打算设计比 NVIDIA 更高效的晶片,以降低 AI 应用价格并
抢占市占率。
Jim Keller 目前任 AI 晶片新创 Tenstorrent 执行长,认为很多市场 NVIDIA 都没服务
到,随着 AI 应用扩展到智慧手机、电动车和云端服务,越来越多公司寻求更便宜的解决
方案,很多小公司不愿为 NVIDIA 高阶 GPU 支付 2 万美元。
Jim Keller 在晶片设计界享有盛誉,也是 AMD Zen 系列的首席设计师,许多人认为他帮
助 AMD 东山再起、奋力追上英特尔。他也是开发特斯拉自驾软体 Autopilot 晶片组的重
要人物。
日本人工智慧独角兽公司 Preferred Networks 运算架构部门副总裁兼技术长
Junichiro Makino 形容「Jim Keller 简直就是传奇」。
设计 AI 晶片时,选择舍弃关键的 HBM
Tenstorrent 成立於 2016 年,准备年底推出第二代多用途 AI 晶片,称某些领域比
NVIDIA AI GPU 更高能效和处理效率。Galaxy 系统比 NVIDIA DGX 效率高三倍,价格更
便宜 33%。
Keller 之所以能做到这点,是因 Tenstorrent 没用高频宽记忆体(HBM)。「即使有用
HBM 的人,也为成本及构建 HBM 所需设计时间挣扎,决定不用此技术。」
HBM 是生成式 AI 晶片的重要零件,对 NVIDIA 产品成功有重要作用,然也是 AI 晶片能
耗巨大、价格高昂的罪魁祸首之一。
典型人工智慧晶片组,GPU 每次执行进程时向记忆体发送数据,需 HBM 高速数据传输能
力。Tenstorrent 设计自己的晶片,大幅减少传输。Keller 指有了新方法,
Tenstorrent 晶片可在 AI 开发某些领域取代 GPU 和 HBM。
Tenstorrent 也设计产品以尽可能实现成本效益,许多公司也在追求更适合的记忆体解决
方案,但 Keller 也坦承,要颠覆庞大 HBM 产业,还需数年时间。他预期与其一间公司
取代 NVIDIA,不如出现更多新公司,填补美国公司未涉足的各种人工智慧市场。
Tentorrent 晶片特点是百余个核心,每核心都有小型 CPU,即「大脑中的微型大脑」。
通常情况单晶片核心只有一个小型电脑和记忆体,只负责解决一个任务,但
Tenstorrent 核心能独立「思考」,决定先处理哪些数据,或放弃不重要任务,提高整
体效率。
Tentorrent 指每个核心都相对独立,可将更多或更少核心堆叠起来,应用更广泛。智慧
手机或穿戴设备只需少量晶片,AI 资料中心可将 100 个晶片组合,用途更灵活。
Keller 说还无法预测 AI 最佳应用是什麽,因此公司策略是打造出适合各种产品的技术
。
U.S. chip designer aims to bring down AI prices pushed up by Nvidia
--
推 pb220918:不爽可以当禽兽 五楼是禽兽!! 10/04 22:12
→ pb220918:盖 10/04 22:12
→ pb220918:盖 10/04 22:12
→ pb220918:盖 10/04 22:12
→ Davisss:我是禽兽 我真爽 我在骑1楼 10/04 22:13
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 180.177.0.241 (台湾)
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Tech_Job/M.1721132748.A.CC5.html
1F:推 Sex5F : 继续吹,搞砸了几个团队和专案 07/16 20:38
2F:推 alarm911 : 没差,不管谁赢最後都是找台积找台湾AI供应链 07/16 20:42
3F:→ kevinmeng2 : 享有盛誉??? 07/16 20:49
4F:推 dagehoya5566: 吃老本罢了 07/16 21:14
5F:→ Obama19 : 现在已经不是单打独斗可以成功的年代了 07/16 21:16
6F:推 Skydier : 水啦 07/16 21:25
7F:推 truelove356 : 嗯 还需数年时间 07/16 22:02
8F:推 stosto : 你不用HBM就跑不赢别人阿 07/16 22:09
9F:推 CCRun : 本文转载自电子设计菁英 07/16 22:09
10F:推 eric61446 : 还不是要先买nv产品去模拟设计 07/16 22:14
11F:推 hanli99 : 楼上几个看不起他的人,可以查看看他多神 XD 07/16 22:47
12F:推 steak5566 : 大神也被酸成这样喔 07/16 23:00
13F:嘘 pf775 : 还不是被台积电屌打 07/16 23:05
14F:推 LuforHCH : 真大神 07/16 23:15
15F:→ olozil : 等HBM降价可能还比较快? 07/16 23:23
16F:推 VSshow : 多神?要求不多,让台积跌回500以下才神 07/16 23:27
17F:推 alvistan : 他干嘛打败台积电??他搞不好直接找台积电代工 07/16 23:28
18F:推 wayne490 : 再神也要靠台积电,呵 07/16 23:30
19F:推 AirLee : Jim很废? 07/16 23:49
20F:推 CowBaoGan : 傻眼连JK都可以酸...不知道该说什麽了 呵呵 07/16 23:57
21F:推 Skydier : 找出替代HBM的方案击垮sk和美光 很赞的 07/17 00:04
22F:→ ted3698 : 当NV塑胶喔... 07/17 00:05
23F:推 SchoolStore : 除非找到读写比HBM快的方式 07/17 01:14
24F:推 mopa : 问题是跟CUDA的相容性有多少,NV的护城河不是那麽容 07/17 01:18
25F:→ mopa : 易打破的 07/17 01:18
26F:→ jacky40383 : 想靠硬体打NV 真的想多了 07/17 01:22
27F:推 Partition : 让AMD重返农药的辣个大神 07/17 01:43
28F:推 bizer : 看起来是要用架构解,效率可能有,但支援性如何要看 07/17 04:52
29F:→ bizer : 看 07/17 04:52
30F:→ MoonCode : 大神没错啊 但应该是在过去了 07/17 05:45
31F:→ MoonCode : 不然我也期待 john carmack 07/17 05:46
32F:推 WaterLengend: 人家nv股王,新创连IPO都不知道啥时候,省省吧 07/17 06:08
33F:嘘 t19960804 : nv用钱就砸死你了 洗洗睡吧 07/17 06:26
34F:推 librasky : HBM就很难买啊 07/17 06:42
35F:推 una283 : 先牡蛎一下,不过在业界不是要做正确的事 07/17 07:09
36F:→ una283 : 而是要做互利的事情才会长得超快 07/17 07:09
37F:→ una283 : 鱼帮水水帮鱼咩 07/17 07:10
38F:推 doranako : 还需要几年,下一位 07/17 07:14
39F:→ houseguy : 就拆开来做ASIC吗 07/17 07:50
40F:推 PRODIGALEX : Jim是真的神,但能否推出与Nv竞争产品还有待时间观 07/17 07:54
41F:→ PRODIGALEX : 察。 07/17 07:54
42F:推 Prado4840 : 谁当年不是新创?不过应该要先问ai是不是对的方向 07/17 08:17
43F:→ Prado4840 : ,太多人把它当成唯一方向 07/17 08:17
44F:→ new122851 : 有多神又如何,这里是资本主义社会,用钱和人脉和专 07/17 08:38
45F:→ new122851 : 利就可以堵死你 07/17 08:38
46F:→ ljsnonocat2 : 记忆体内运算?或者每个核心旁边搭配记忆体? 07/17 08:41
47F:→ ljsnonocat2 : 不过记忆体与逻辑制程就是不太一样 不然早就做一起 07/17 08:41
48F:→ ljsnonocat2 : 搞软体的不一定懂得制造上的困难 07/17 08:42
49F:推 Neistpoint : NV花点钱把它买起来,看起还是个GPU环绕CPU的蜂巢 07/17 08:43
50F:→ Neistpoint : 式结构 07/17 08:43
51F:→ houseguy : 记忆体管理跟介面速度看有没有发展空间 07/17 08:53
52F:→ houseguy : 如果要追上人脑的话啦 07/17 08:55
53F:推 jizzyui : 便宜的显卡要来了吗? 07/17 09:02
54F:推 outzumin : 这间有机会 产线仔不懂 07/17 09:26
55F:推 leoloveivy : 可以没hbm 没错 大型attention 类的现在cuda/hbm 07/17 09:44
56F:→ leoloveivy : 反而是瓶颈 一直优化怎麽读写记忆体不如设计一个 07/17 09:44
57F:→ leoloveivy : 不这样搞的 07/17 09:44
58F:→ cookies0611 : 等HBM降价比较快吧 07/17 09:54
59F:推 lancechance : 傻眼,连JK都在酸,人家哈波小说不知道赚多少版税 07/17 10:16
61F:→ Alwen : 他之前又回去牙膏,但还是救不了牙膏 07/17 10:47
62F:推 ppc : 神人 07/17 11:35
63F:→ ma721 : 速度就是关键啊,等半天的回覆谁要用 07/17 12:06
64F:→ cylee : 查 wiki 才知道他的成就,真强者 07/17 12:24
65F:→ dslite : 高效没问题 问题是不能跑cuda 07/17 18:43
66F:推 linuxpi : 不用HBM要用什麽? 07/17 19:34
67F:推 centiyan : 关键是「某些领域」,赢特定领域应该不会抢到Nvidi 07/17 19:42
68F:→ centiyan : a太多营收,说不定对反托拉斯缠身还有些好处 07/17 19:42
69F:推 jin20040117 : 改玩MRDIMM看看啊 07/17 19:58
70F:推 yychiuchang : 牙膏包袱那麽重,怎麽救? 07/17 19:58
71F:→ MTKer5566 : 再怎麽神都比比过台G轮班星奴呀 07/17 22:41
72F:→ MTKer5566 : 这种奴性是学不来的台G knowhow 07/17 22:42
73F:→ MTKer5566 : 比不过* 07/17 22:42
74F:推 yeltek : 留言那几个土包子乱酸,连ic设计跟制造代工都分不 07/18 00:48
75F:→ yeltek : 清楚的,真的是他妈笨得有找 07/18 00:48
76F:推 weezyriver : 现在加速器不是要往PIM去走吗 07/18 01:07
77F:推 tsairay : 靠设计有极限的啦,苹果的8GB RAM也是吹上天 07/18 10:18
78F:→ a9564208 : 现况比较会变成很强但没人用 07/18 11:17
79F:推 Battie : JK是谁?会轮班吗?轮班技术有赢产线菁英吗? 07/18 14:48
80F:推 fir191938 : 没有轮班星人也只是纸上谈兵 07/18 15:04
81F:嘘 Kazetachinu : 有讲跟没讲一样 07/19 07:29