手机浏览器扫描二维码访问
不知不觉,又过去了两年时间。
对于孟繁岐个人来说,这段时间他的进展并不顺利。
AI技术速度放缓的原因是多方面的。
首先,孟繁岐必须承认,在将前世的技术优势全部消耗殆尽之后,他已经再也无法继续维持持续了近十年的,那独一档的技术视野。
“虽然早就做好了心理准备,却还是感觉有些失落和无奈啊...”
深夜里,孟繁岐在办公室的躺椅上揉着自己紧锁的眉头。
自重生以来,孟繁岐一直克制着自己,在诸多学者身边维持谦逊好学的姿态,万不敢忘自己短处所在。
不过在GPT系列推动至极限之后,所面对的就不仅仅是算法和技术的问题了。
“要说起来,老黄对公司的限制,比我水平下降对公司的限制还大!”
孟繁岐为此感到焦躁。
他虽然无法像此前一样做到步步不错,直指要害,却毕竟也与世界上最顶尖的群体常年接触学习。
此外,还手握最为庞大的资金与计算设备资源。
在此情况之下,想要做不出成绩,其实也是非常困难的。
因为普通人要运行一年的实验,你使用千倍的算力,也就是半天的时间就可以计算完成了。
早上吃着早饭实验跑起来,中午午休回来便已经可以看到结果。
在这样的效率加持之下,即便孟繁岐如今判断错误的次数变多,也并不是什么要紧事。
无非就是多做些实验,多消耗几倍的算力罢了。
折算成金额,一年十来亿顶了天。
对于早已财富自由的孟繁岐来说,只要钱能解决的事情都不是事。
可问题就在于,老黄的计算设备研发,终究还是要时间的。
不像孟繁岐,可以提前三五年往外发新的算法技术,黄仁勋的硬件技术那是真的催不来,只能一点点缓步推进。
这番发展速度上的错位,导致孟繁岐如今有力无处施展。
“如果能有后来的H100集群,我所需要的显卡数量可以减少至少8到10倍。”
孟繁岐如今受到的一大限制,就是继续拓展算法边界所需要的显卡数量实在太多了。
卡一多,它就容易出问题,和人一样。
假设说一张卡训练三个月,百分之99.99的概率都是正常的。
当这个数字来到2000,乃至10000的时候,这个概率则会惊人地降低为82%和百分之37%。
也就是说,当你使用万卡集群的时候,想让每一张卡都能顺顺利利地把工作给完成了,这个可能性只有可怜的三分之一。
而只要一张卡出现了问题,就势必会对整个集群产生影响,中止训练。
为了避免这种一卡罢工,万卡围观的情况发生,孟繁岐投入了大量的资源和时间。
可GPT4o,以及具有推理功能的o1之上,使用旧有办法继续提升性能的空间并不太大了。
孟繁岐这边收效甚微,便给了追赶者们极大的机会。
原本性能差了closeai许多的诸多大厂们,都在过去的这段时间里大大缩短了大模型性能之间的差距。
“从根本上来看,硬件设备对我的限制其实远超软件算法。”
孟繁岐此前一直认为自己失去先知优势后,无法继续软件上的突破将会是最大的问题。
如今看来并非如此,随着与孟繁岐关系亲近的那个男人下台,拜老登政府限制英伟达的计算设备出口中国。
如果没有遇到圣杯,30岁的罗恩只是一个普通的佣兵队的队长。如果没有遇到圣杯,30岁的罗恩只是一个拥有一个天才后辈的大叔。但是他遇到了圣杯,他失去了生活中的一切。他要完成兄弟对他的托付,他要回去履行尘封的婚约。复仇命运,令他重新行走在魔法大陆上。--------------------------主角是一个三十的大叔,不年轻,但也不老。我想写一个熟男的故事,义气豪迈,成熟稳重,不失热血的男儿,有一个等他多年的女子,也有对他钦慕的淑女。其实我是深受天龙八部里面乔峰的影响,也想写出一个这样的人。当然结局不是悲剧。---------------新书捕妖记...
十八岁那年,父母的坟被刨了之后,我才明白自幼将我抚养长大的三叔并不像表面上看起来那样简单三生羁绊,一世牵连。我说往后余生,请多指教!她说滚!你是我今生渡不过的劫,在彼岸守候三载浮生未歇!...
这是一个秦始皇因服食不死仙药而长生不死的世界里的故事。体内拥有魔魂的主角在跨越九百年的穿越中,撞倒了比武招亲的绝世美女,随之而来的,是怎样一场轰轰烈烈的传奇?女娲补天,大禹救世,九州崩裂,秦皇不死,这一连串事件的背后,有着怎样不为人知的秘密?道家墨家阴阳家,诸子百家一网打尽!玄术武术机关术,穿越少年俯瞰天下!交流群104635963(全新)73206810(已满)...
萌妻当道首席哪里逃从爱到恨,再从恨到爱,邢露很累,但秦谨言就像是毒药,让她上瘾,欲罢不能。...
我从未想过我会婚内出轨,然而这却实实在在的发生了。我并不是水性杨花的女人,两年前嫁给刘泽凡时,我们许诺执子之手,与子偕老。可这个承诺,随着他的出轨变成了笑话。...
生活的起源在于平淡,金钱,美女,高科技,主角拥有着世界上别人无法想象的一切,当主角真正热求于平凡一生的时候,面对国家和自己,主角选择了(新书龙翔杏林已经开始上传,请大家多多支持)...