英伟达被架构困住,华为为何能推倒重来?
【本文由“我不知道”推荐,来自《华为打造“最强超节点”,这项全球领先技术很关键》评论区,标题为小编添加】
- 观察看看
如果nv也是超节点。。。那不是更强大了,差距更大了。。。
这东西没那么简单,因为NV的东西本质还是遵循冯诺伊曼建立的计算机架构,在这个架构中,无论显卡多牛,你只是高速总线上的一个设备,你直接命令网卡吗?不行,虽然人家是慢速设备,但人家和你是平级的,要通讯就得交给cpu来安排。但是在AI运算中大量的时间被浪费在这种交互中,无论怎么加带宽都差点意思。
这里的麻烦还在于你如果改硬件架构,不好意思,操作系统也得改,因为底层逻辑彻底变了,到中国这里,反正你都制裁了,那索性推倒重来好了,所以这里的超节点底层逻辑是围绕计算卡展开的,连操作系统都是配套的。要是NV想弄,除了硬件,你还得找微软或者其它系统软件配合,当然你也可以自己搞一套,然后。。。嗯,你的cuda也得改🐶







