亲,双击屏幕即可自动滚动
第403章 子弹还在飞(1/2)

请关闭浏览器的阅读/畅读/小说模式并且关闭广告屏蔽过滤功能,避免出现内容无法显示或者段落错乱。

北京时间6月30日晚上11点半,美东时间上午11点半。

国内的热搜还在发酵,外网也开始动了。

最先动的是Reddit的r/MaeLearng板块。一个叫“throwaway_ai_2016”的用户发了一个帖子,标题是《DPX1.5froa:IraandardbencharksandInotsurewhattothk》。

帖子内容不长,但信息密度很高:

“我通过一个中国朋友搞到了邀请码。在HuanEval上跑了完整测试,DPX1.5得分71.8%。在GSM8K数学推理上,得分64.3%。在MMLU上,得分58.7%。对比:GPT-3在HuanEval上是48.1%,GSM8K是34.2%,MMLU是43.9%。要么中国人做出了真正的突破,要么他们找到了某种取巧的评测方法。但我在三个不同的benchark上跑了三遍,结果一致。如果这是取巧,那这个取巧本身就是一个突破。”

帖子发出来之后,前二十分钟的评论基本是同一个调子。有人问“数据给我看看”,有人说“又是中国的PR项目吧”,有人直接甩了一个“lol”就走了。前二十条回复里,十五条在质疑,三条在嘲讽,两条在要原始数据。

但到了美东时间下午一点,风向开始变。

一个ID叫“yann_le_fan”的用户发了一条长回复。这人后来的身份被扒出来是某大厂AILab的研究员,在圈子里有点名气,平时不太发帖,但一开口就很有分量。

“我拿到了邀请码。跑了五个维度:代码生成、数学推理、逻辑推理、中文理解、英文写作。结论是——DPX1.5在代码生成和数学推理上确实超过了GPT-3。不是一点点,是代际差距。它的注意力机制明显经过了优化,长文本依赖处理得非常好。我在一个两千token的上下文里测试了代码补全,它没有丢任何关键信息。GPT-3在这个长度上已经开始胡言乱语了。”

这条回复

“不知道。但从行为上看,它不像纯粹的Transforr。它的推理链更短,更直接。可能是某种混合架构。”

这条回复的点赞数在半小时内冲到了三百多。质疑的声音没有消失,但开始有人转向“我需要邀请码”和“有人能分享一下体验吗”。

美东时间下午三点,一个更重磅的人出现了。

RichardRashid,微软前首席研究官,微软研究院创始人之一。他在自己的Twitter上发了一条:

“我通过一个学术渠道拿到了DPX1.5的访问权限。花了四个小时测试。结论:如果这个模型是中国人自己做的,那我们必须重新评估中国在AI领域的真实水平。它在代码生成和数学推理上的表现,超过了我们目前公开的最优模型。不是追平,是超过。我建议微软研究院立即组织团队进行对标分析。”

本章未完,点击下一页继续阅读。

@流岚小说网 . www.hualian.cc
本站所有的文章、图片、评论等,均由网友发表或上传并维护或收集自网络,属个人行为,与流岚小说网立场无关。
如果侵犯了您的权利,请与我们联系,我们将在24小时之内进行处理。任何非本站因素导致的法律后果,本站均不负任何责任。