手机浏览器扫描二维码访问
而且这两个好处加起来,还能“缩短训练周期”。比如训练GPT-4这样的大模型,以前用老技术需要3个月,现在用FP8精度,算力翻2倍、能耗降30%,算下来训练周期能缩短25%,也就是只要2个多月就能训练完。对企业来说,训练周期缩短意味着能更快推出新的AI产品,比如别人还在训练,你已经把新的AI聊天工具上线了,自然能抢占市场先机。
这章没有结束,请点击下一页继续阅读!
3. 国产芯片的动作:寒武纪、壁仞科技已跟上,BR100芯片算力达1000TOPS,专门对标“超大规模训练”
可能有人会问:国外芯片早就支持FP8精度了,国产芯片能跟上吗?答案是“当然能”,而且已经有不少国产企业拿出了实实在在的产品。
首先是大家比较熟悉的寒武纪,它的思元系列芯片早就支持FP8精度了,比如思元590芯片,用FP8精度计算时,算力比用老格式提升1.8倍,能耗降低28%,已经能满足不少中小规模AI模型的训练需求。
除了寒武纪,还有一家叫壁仞科技的企业,推出的BR100芯片更是“重量级选手”——它支持FP8精度,算力能达到1000TOPS(1TOPS相当于每秒算1万亿次)。这个算力有多强?简单说,用BR100芯片训练一个百亿参数的AI模型,可能只要几天时间;要是用来训练超大规模的大模型(比如千亿、万亿参数),也能轻松应对。
现在不少国内的大模型企业已经开始用这些国产芯片了。比如某互联网公司,以前训练大模型用国外芯片,一次要花500万;现在换成壁仞BR100芯片,因为支持FP8精度,算力够、能耗低,一次训练只要300万,成本直接降了40%。而且国产芯片不用受国外政策限制,不用担心“断供”,用起来更放心。
三、第二个升级方向:多芯互联——让芯片“组队干活”,解决“单芯片算力不够用”的难题
聊完了FP8精度,再来说第二个关键技术:多芯互联。这个技术的思路特别简单——既然单颗芯片的算力有限,那不如把多颗芯片“连起来”,组成一个“虚拟大芯片”,让它们一起干活,算力自然就上去了。
就像咱们搬东西,一个人搬不动100斤的箱子,要是8个人一起抬,就能轻松搬起来。多芯互联就是让芯片“组队抬箱子”,核心是解决“单芯片算力跟不上大模型需求”的问题。
1. 为啥需要多芯互联?单芯片“再牛也有上限”,大模型需要“集体力量”
可能有人会问:既然能把单颗芯片做得更厉害,为啥还要搞多芯互联?答案是“单芯片的算力有上限”。
就像一个人再强壮,最多能举200斤,不可能举2000斤;单颗芯片不管怎么升级,算力也有天花板——比如现在最厉害的单颗AI芯片,算力也就1000多TOPS,而训练一个千亿参数的大模型,需要的算力至少是8000TOPS,单颗芯片根本不够用。
而且单颗芯片做得太复杂,成本会飙升。比如想把单颗芯片的算力从1000TOPS提升到8000TOPS,需要的研发成本可能是原来的10倍,售价也会贵得离谱,没几个企业能买得起。
这时候多芯互联的优势就体现出来了:不用把单颗芯片做得“神乎其神”,只要把多颗普通芯片连起来,就能达到超高算力。比如用8颗1000TOPS的芯片,通过多芯互联组成“虚拟大芯片”,总算力就能达到8000TOPS,成本只要单颗“超级芯片”的1/3,性价比一下子就上来了。
2. 多芯互联咋实现?靠“高速互联接口”,让芯片之间“说话不卡顿”
要让多颗芯片“组队干活”,关键得解决一个问题:芯片之间得能快速“传递数据”。就像8个人一起抬箱子,得喊着“一二一”同步发力,要是有人慢半拍,箱子就会歪;芯片之间要是数据传得慢,有的芯片算完了等着要数据,有的芯片还没传完,整体算力就会浪费。
妈妈的名字很好听,叫黎绮雯,是个警察。她经常对我说,她随时都有可能在追捕罪犯的过程中丧命,到那时候,我需要学会如何保护我自己。现在的我看起来太懦弱了,妈妈有时候看我的眼神总是有些恨铁不成钢,我知道妈妈心中一定是觉得,作为一个警察的儿子,懦弱成这样,如果是被别人外人知道了,一定会笑掉自己的大牙。...
苍穹动摇时,我放声狂笑,挥动如意金箍棒,砸它个天翻地覆! 此后一万年,你们还会记住我——齐天大圣孙悟空! ※※※ 这个世界上总有那么一些人,他们英勇无畏,固执,乃至偏执,不羁,骄傲,而又狂妄。即使到了绝境,他们也绝不妥协。 宁愿死,也不愿输。...
左手锅,炒人间美味;右手刀,辨世间冤屈 从现代法医到古城仵作,到天下第一女捕头 晏骄亲身书写着传奇。 而这个成功女人背后的男人,定国公, 也终于过上了相妻教子看家带娃的退隐生活。 【不是,划掉!!】 现代女法医与半退隐将军吃喝查案的故事, 夫妻搭档,干活不累!故事发生在上部结束后两年1个月...
一次意外,让宅男秦少风穿越重生到了异世,成为了连泱国蓝江城秦家大少。什么修为被废?丹田也无法修复了?不怕,咱有一个神级修炼系统,破坏的再严重的丹田也能修复!系统在手,功法无尽任我有!达摩老祖的易筋经……齐天大圣的火眼金睛……李寻欢的小李飞刀……美好的世界,我秦少风来了!......
盛世太平,朝中无事,能引起些许波澜的,无外乎一些八卦。 某日,号称天下第一才子、第一美男子、第一风流子的白晓风,办了家晓风书院。 一时间,什么公主、郡主、才女、千金……蜂拥而至,各个醉翁之意不在酒。 史官程子谦蹲点晓风书院,各种“子谦手稿”流出,流到街头巷尾又流到皇宫内院,白晓风最终情归何处,成了都城百姓茶余饭后津津乐道的话题。 慢住,说到这里,大家是否认为本书的主角就是白晓风?非也! 皇朝有个将军,叫索罗定,这位名字拗口又玩世不恭、“臭名远播”还不受欢迎的皇朝第一高手,才是本书的男主。 皇帝给了索罗定一个任务,让他进书院做卧底,汇报第一手资料,偶尔推波助澜偶尔破坏好事,好让皇帝在跟嫔妃们打赌时稳赢不输。 另外,皇帝还让索罗定顺便去学学礼仪,改改他那一身的痞气。 而负责“管束”索罗定的,是白晓风那位毒嘴又八卦的漂亮妹子白晓月。 索罗定就这么跟白晓月杠上了,这丫头不是一般的难对付!...
舒天,Omega,仗着自己天生拥有3s级精神力在学校里耀武扬威,牛逼冲天。 可他做梦都没想到,有朝一日他竟然被所谓的娇花系统成功绑定。 【任务一:您的学习成绩下降,请去找未婚夫要个安慰的抱抱。】 【任务二:您的衬衫脏了,请向未婚夫借件儿他的衬衫来穿。】 【任务三:您的未婚夫身负重伤,行动不便,请您用毛巾帮他仔细擦拭身体。】 舒天握着手里的毛巾,看了看躺在床上“行动不便”却还释放着Alpha信息素的男人。 顿时黑脸掀桌:什么狗屁系统!老子不干了! 系统:叮,请维持好娇花人设哦,系统惩罚中…… 舒天立马身子一软,泪眼婆娑,面色微红的在心里爆了句粗口:系统你大爷! 文案二: 秦景恒和他暗恋多年的Omega有了婚约,原本以为他会厌恶拒绝,却没想到那人突然变了性子,娇娇软软的老想往他怀里钻。 面对心上人的撒娇关怀,他抑制了七年的感情终于一发不可收拾…… *abo星际文/只想谈个恋爱的甜饼/日常流水账/不生子 *(大写加粗)系统会有强制任务的元素*...