THE LATEST INFORMATION
| 新闻动态 |
他曾是Ilya的亲信,因揭露OpenAI安全隐患被解雇,却在短短6个月内以47%回报打造出管理规模15亿美元的基金。作为AI安全激进派,他在165页论文《Situational Awareness》中预测2027年将迎来AGI,并呼吁建立「AI版曼哈顿计划」。
正常人大概率会借势去成立自己的AI公司,然后融资一波,看着情况上市,或者被科技巨头收购。
但真实答案是他去「炒股投资」了,并在6个月内取得47%的回报,还筹集了15亿美元。
但是他的基金战绩却超过了一众金融领域的专业投资者,在今年(2025)上半年扣除费用后获得了47%的收益。
尽管Leopold没有任何金融背景,但靠着他在AI领域KOL的地位,他还是说服了很多人。
我比任何在纽约管理资金的人都拥有更多的态势感知能力,我在投资上肯定会做得很好。
2024年4月,Leopold被OpenAI以安全为由开除;开除后不久,6月,他就发表了这篇文章。
而Leopold所在的部门正是Ilya所领导的超级对齐部门,他也是Ilya的支持者,这或许就是作为Ilya拥趸的代价。
而在这篇「鸿篇巨著」中,开篇部分Leopold就特地表示这篇论文是献给Ilya的,可见对其的崇拜之心。
2023年,年仅21岁的德国青年Leopold踏入旧金山OpenAI总部的大门。
该团队由Ilya Sutskever和Jan Leike领导,目标是在四年内解决超级智能的对齐问题。
不久后,他注意到公司安全薄弱。一次黑客入侵未被公开披露,更让他忧虑关键算法被其他对手窃取。
出于责任感,Leopold写下措辞严厉的安全备忘录,直言OpenAI防护「极度不足」。
随后,他遭到HR警告,尤其因他在Altman被罢免风波中没有签署支持复职的请愿,被视作「不够忠诚」。(看来老美那边也玩站队的游戏)
2024年初,他整理了一份关于AGI安全措施的头脑风暴文档,并请三位学者反馈。
他坚称文档无机密,仅含公开信息,但公司仍以「泄露内部资料」为由展开调查,并翻出他此前的「董事会越级」旧账。
最终在2024年4月,Leopold被OpenAI解雇,理由是「泄密且不配合调查」。
耐人寻味的是,就在Leopold被解雇后不久,Ilya与Jan相继离开OpenAI。
在2024年发表的这篇论文中,Leopold认为,到2027年,大模型将能够完成AI研究人员或工程师的工作。
他的论据也很简洁直观——你只需要画出过去4年GPT模型有效计算量的增长曲线年后,就可以得出这个结论。
Leopold提醒我们——往后退一步,看看AI已经走了多远。直觉上,可以将模型能力类比为人类的智能水平,从而衡量AI能力的进步:
从2019年学龄前儿童水平的GPT-2,到2023年聪明高中生水平的GPT-4,OpenAI只用了4年。
能深入思考并推理数学问题,并胜任从编写复杂代码到迭代调试的高级编程任务。
能在更长的文本中保持逻辑和内容的一致性,并能轻松驾驭和探讨各类复杂话题。
在摩尔定律鼎盛期,算力每10年才增长1-1.5个数量级(OOM);而如今AI硬件的年增长率达到0.6个数量级,
GPT-4延续了这种戏剧性增长,而且从OpenAI囤积芯片的动作来看,这个增长速度会逐渐演变为长期趋势。
Aschenbrenner预估,「在这个十年结束之前,将有数万亿美元投入到GPU、数据中心和电力建设中。为支持AI的发展,美国至少将电力生产提高数十个百分点」。
而到本世纪末,一个集群就能吞掉1T美元,每年产出上亿个GPU,AI所需电力占美国发电总量的百分比,将从现在的不到5%上升到20%。
对算力的疯狂投资带来的惊人收益是非常明显的,但算法进步的驱动力很可能被严重低估了。
从长期趋势来看,算法进展的速度也相当一致,因此很容易根据趋势线做出预测。
回顾2012年-2021年期间ImageNet上的公开算法研究,可以发现,训练相同性能模型的计算成本以近乎一致的速度下降,每年减少约0.5个OOM,而且每种模型架构都是如此。
),是指某些情况下模型的原始能力被阻碍了,而通过简单的算法改进可以解锁和释放这些潜在能力。虽然它也是一种算法改进,但不仅仅是在已有范式内提升训练效果,而是跳出训练范式,带来模型能力和实用价值的跃升。
METR同样发现,在智能体任务中,GPT-4基础模型的性能仅为5%,经过后训练能达到20%,再结合工具和框架后,性能可跃升至近40%。
想象一下,如果AI可以使用电脑,有长期记忆,能针对一个问题进行长期思考和推理,而且具备了入职新公司所需的上下文长度,它会有多么强悍的能力?
综合考虑算力、算法效率与解开收益这三个方面的叠加,GPT模型从第2代到第4代,大致经历了4.5-6个OOM的有效计算扩展。
首先,随着计算效率提高,迭代速度会越来越快。假设GPT-4训练花了3个月的时间,到2027年,领先的AI实验室将能够在
一分钟内训练一个GPT-4级别的模型。而且,由于「解开收安博体育益」的存在,我们不能仅仅是想象一个非常聪明的ChatGPT,还需要把它看成一个非常智能的、能独立工作的Agent。
到2027年,这些AI系统基本上能够自动化所有认知工作,或者说是所有可以远程进行的工作。但是作者同时也提醒道,这其中有很大的误差范围。
如果「解开收益」逐渐停滞,或者算法的进展没能解决数据耗尽的问题,就会推迟AGI的来临时间。
但也有可能,「解开收益」释放了模型更大的潜能,让AGI的实现时间比2027年更早。
在2024年的一次采访中,Leopold就认为英伟达的数据中心收入将从每季度几十亿美元增长到每季度250亿美元。