WSJ:美制裁加速中国研发不依赖最新芯片的AI技术

文章来源: - 新闻取自各大新闻媒体,新闻内容并不代表本网立场!
被阅读次数


美国对中国实施芯片制裁措施,正促使中国科技业者加速研发不仰赖最新美国芯片的先进人工智慧(AI)技术。图为示意图。路透

美国对中国实施芯片制裁措施,正促使中国科技业者加速研发不仰赖最新美国芯片的先进人工智慧(AI)技术。


华尔街日报检视研究论文并採访员工后发现,中国业者正在研究利用更少、威力没那么强大的半导体,就能达成最先进AI性能的技术,同时研究如何组合不同类型的芯片,避免只仰赖单一类型芯片。

包括华为、百度与阿里巴巴,都是想办法从现有电脑芯片发掘更多用处的业者。

研究人员和分析师表示,利用这些变通的方法来追上美国AI领导业者,实际上仍是一大挑战,但一些实验显示出,若取得成功,这些研究可让中国科技业者同时挺过美国的制裁措施,并且在面对未来的限制措施时,自身将更具韧性。

华为和百度不愿置评,阿里巴巴则没有回覆置评请求。

随著要将ChatGPT这类模型商业化的竞赛升温,全球企业需要更多威力强大的芯片,同时还要想办法竭力善用这些芯片,以便压低这些飙高中的AI研发成本。


对陆企来说,这是个极关键的问题,因为美国的制裁措施让他们没办法取得像是辉达(Nvidia)制的最先进芯片,此外,员工、AI研究人员和产业分析师表示,陆企已迅速消耗掉现有的美国芯片来打造与ChatGPT相类似的软体。

脸书母公司Meta Platforms的AI基础架构与大型语言模型研究人员张苏珊(Susan Zhang,音译)表示:“可从字裡行间看出他们试图寻找世界上任何一种运算方式来弥补先进硬体的不足。”

北京最高决策机构上月表示,中国应鼓励AI研发创新;美国拜登政府在去年10月全面限制向中国供应芯片后,已明示未来可能进一步实施限制措施。

陆企现在无法取得目前最受业界欢迎的AI开发芯片A100芯片,以及3月推出的新一代版本、能提供更多算力的H100芯片。

不过,辉达为中国市场创造出降级版的芯片,分别是A800与H800,两款修改后的芯片降低芯片与芯片之间的沟通能力。这些产品可为开发小型AI模型提供有效的替代方法,这类小型AI模型就像是驱动短影片App抖音(TikTok)的推荐演算法所使用的模型。不过,这类芯片无法用于发展大型AI模型,因为大型AI模型需要数百或数千个芯片共同协力运作,举例来说,瑞银分析师估计训练像ChatGPT的AI模型,需要5,000至10,000个A100芯片来进行训练。


与中国政府与关的半导体产业协会的调查显示,在中国境内可用于训练大型AI模型的A100芯片大约有4万个至5万个,显示供应吃紧。知情人士说,在美国制裁前就已囤积A100芯片的阿里巴巴与百度等业者已严格限制内部使用外国的先进芯片,把这些芯片保留用于需要强力运算的任务。

根据开源研究论文和知情人士透露,百度近年来一直寻求将海光信息的DCU、华为的AI训练芯片Ascend以及自家的崑崙芯片等国产芯片整合到AI研发中。一些知情人士说,许多陆产芯片在训练大规模模型时仍然不可靠,因为容易瘫痪。

另据经营AI基础设施公司HPC-AI Tech的新加坡大学教授尤洋的说法,许多陆企正试图把三或四种没那么先进的芯片组合在一起,来模拟辉达最先进处理器的性能。

例如在4月,腾讯就公布一套新的运算群,即使用辉达H800芯片进行大型AI模型训练的一组连结芯片。

尤洋说,这种做法可能甚耗成本,例如一家美企若需要1,000个H100芯片来训练大型语言模型,那么一家陆企便需要3,000个以上的H800芯片来达成同样成果。


虽然在全球研究圈中仍不太使用这类方法,而且难以实行,但中国研究人员取得一些进展。例如华为研究人员在3月的一篇论文中展示如何只利用该公司的Ascend芯片、而不使用辉达的芯片,来训练华为最新一代大型语言模型。儘管存在缺点,但这个名为PanGu-Σ的模型已达到一些华语任务的先进性能表现,包括阅读理解和文法问题。

wd01702 发表评论于
这是废话。北朝鲜估计正在加速研发连AI都不依赖的技术。
澳憨88 发表评论于
裘千里 发表评论于 2023-05-08 13:05:10
bigcatf4 发表评论于 2023-05-08 12:47:09

我还是那个观点:如果你自己差的替你们公司的白人拎鞋,被你的白人邻居白眼,那么我可以理解你为什么这么仰视白人
但是就算这样,还是希望你多尊重在美国和世界各地的聪明华人,和中国的聪明华人,这些才是中国人的支柱。虽然我还不是,我每天都在努力。

=========

文学城里的某些华人,只剩了一张华人的人皮,跟他们说希望,没用!
--------------------------------------------------------------------------
骂的好,这些????,本来就不是中国人
澳憨88 发表评论于
@烟云流逝却是雪茄. 希望您多多介绍,这才是专家的发言。 我喜欢您说的悲观+希望。 唉!
-------------------------------------------------------------------------
+1
rayofday 发表评论于
这个天朝网友们早有定论了, WSJ消息落后了。网友们说,美国的人工智能重心在智能,天朝的人工智能重心在人工,各自在各自的领域都是No 1。
不允许的笔名 发表评论于
不依赖最新芯片的AI技术也得等美国开发完了再抄。中国研发个P。

RMT可能用一块1080就产生100万token了。
亮油 发表评论于
进化分支,就像章鱼没大脑发育一神经节替代,也好用,只是永远不成人。
不好吃懒做 发表评论于
美国对中国实施芯片制裁措施,正促使中国科技业者加速研发不仰赖最新美国芯片的先进人工智慧(AI)技术 - Why not 研发不仰赖 芯片 的先进人工智慧? Just a joke, good products need both good HW and SW. Better China develops some new jets without engines.
theriver1 发表评论于
烟云流逝却是雪茄 发表评论于 2023-05-08 14:29:21
who da f**k r you dude? 每次来WXC,就见你们一帮渣碎开口闭口骂人5毛粉宏,还‘好心提醒’?!
--------
哪里跑出来的蠢货?连喜事和丧事都没搞清就敢跑出来丢人现眼?中国现在是水深火热还是欣欣向荣你这蠢货心里没个β数吗?中国企业和市场的水深火热是谁造成的你心里没个β数吗?你以为你把你家丧事当喜事来办就真的是爱你家啦蠢货?!
烟云流逝却是雪茄 发表评论于
theriver1 发表评论于 2023-05-08 14:03:18

----------
who da f**k r you dude? 每次来WXC,就见你们一帮渣碎开口闭口骂人5毛粉宏,还‘好心提醒’?!LOL玩笑有点冷。一帮碎碎看见中国倒霉就跟过年似的,看见中国有好事就如全家奔丧。有必要那么恨吗?我不 anti or pro China。but let's just chill.
旁观者XWY 发表评论于
有点像人海战术。
seewhatisee 发表评论于
ai技術不應該對中國開放。
theriver1 发表评论于
烟云流逝却是雪茄 发表评论于 2023-05-08 13:48:26
还自称 Deepspace, 是你的脑洞还是ur mama的深洞?谁告诉你机械手不是AI?你以为机械手都是你吗晚上用的那种粗笨?你美爹 Amazon 分拣的机械手是不是AI?傻X下午不洗碗去 google 一下 definition 'n history of AI
----------
哪里跑出来没教养的蠢货!人家好心提醒你有错吗?本文说的AI,是专指基于AI基础架构与大型语言模型而开发的聊天AI,只有这种AI才需要A100或H100芯片!
烟云流逝却是雪茄 发表评论于
Deepspace_01 发表评论于 2023-05-08 13:16:27

===================================================================
还自称 Deepspace, 是你的脑洞还是ur mama的深洞?谁告诉你机械手不是AI?你以为机械手都是你吗晚上用的那种粗笨?你美爹 Amazon 分拣的机械手是不是AI?傻X下午不洗碗去 google 一下 definition 'n history of AI
tz2000 发表评论于
en,跟老大哥学,把洗衣机上的芯片拆下来装到导弹上,
fonsony 发表评论于
我们黄狗热烈庆祝中方无心片可用,死桥桥的
theriver1 发表评论于
裘千里 发表评论于 2023-05-08 13:05:10
文学城里的某些华人,只剩了一张华人的人皮,跟他们说希望,没用!
-------
你这助纣为虐替残害华人的土共洗地的五毛也配代表华人?
一点小看法 发表评论于
这个AI叫算盘AI。哈哈。
不允许的笔名 发表评论于
AI最新突破之后也许不再需要高端芯片了。

一个是Hinton本人的FF,另一个是RMT,起码inference阶段可能降低到5年前一块老GPU即可。
悟空是女的 发表评论于
@烟云流逝却是雪茄. 希望您多多介绍,这才是专家的发言。 我喜欢您说的悲观+希望。 唉!
bigcatf4 发表评论于
theriver1 发表评论于 2023-05-08 12:06:56
所谓不依赖最新芯片(A100与H100),说白了就是依赖A800与H800。因为nvidia的A800与H800性能高到足够吊打一切中国产AI芯片,所以中国再加速也是被美国公司远远甩在后面。
中国现在的AI应用几乎清一色都是翻墙(国内暗语叫黑魔法)后连接到OpenAI等的接口。因为中国的AI产品实在是烂泥扶不上墙。
----------
我还是那个观点:如果你自己差的替你们公司的白人拎鞋,被你的白人邻居白眼,那么我可以理解你为什么这么仰视白人
但是就算这样,还是希望你多尊重在美国和世界各地的聪明华人,和中国的聪明华人,这些才是中国人的支柱。虽然我还不是,我每天都在努力。
七戒 发表评论于
中国已经成功使用上个世纪的最最古老芯片制造出了22世纪都还能保持领先的世界最强AI。
烟云流逝却是雪茄 发表评论于
我刚在中国参观了几个工厂。高度自动化,AI机器人替代人工,原先60多人的生产线,现在一个人从头到尾搞定。质量,产量,成品率大幅提高。而且每个上规模的工厂都在搞AI。老板还非常不满意,说明年再来看才算真正成形。我在美国还真没看到有那么高度自动化的生产。中国是悲观+希望,城里一帮台巴子以为中国完蛋,开香槟有点早。
海鷗 发表评论于
唉….一个12缸发动机与4缸发动机哪个会更快?
roliepolieolie 发表评论于
“例如华为研究人员在3月的一篇论文中展示如何只利用该公司的Ascend芯片、而不使用辉达的芯片,来训练华为最新一代大型语言模型。儘管存在缺点”

为华为点赞!就应该这样。脚踏实地地自力更生,做出的东西是自己的。别成天吹牛逼,还死皮赖脸地非要站在美国的肩膀上与美国比高低。

现在,美国不让你搭便车了。
德州呆子 发表评论于
前几天百度还高调的说新AI的研发是用的 A100.他们在制裁前买了所有的能买的
theriver1 发表评论于
所谓不依赖最新芯片(A100与H100),说白了就是依赖A800与H800。因为nvidia的A800与H800性能高到足够吊打一切中国产AI芯片,所以中国再加速也是被美国公司远远甩在后面。
中国现在的AI应用几乎清一色都是翻墙(国内暗语叫黑魔法)后连接到OpenAI等的接口。因为中国的AI产品实在是烂泥扶不上墙。
man008 发表评论于
没有美国芯片开发出来的中国AI和包子一样,好多字不认识,老念错别字。
墙头的一朵梨花 发表评论于
研究吃空气也能吃饱的技术。哈哈哈哈哈哈
boypalm 发表评论于
美帝嚇尿了!