OpenAI是一家长期处于聚光灯下的公司,其中的明星人物我们都耳熟能详:SamAltman、IlyaSutskever、MiraMurati、DarioAmodei、JohnSchulman……
今天,Altman则通过一篇博文特别介绍了两位居于幕后的核心研究员:JakubPachocki和SzymonSidor,称他们在结合前沿研究与工程实践方面解决了诸多难题,对OpenAI的发展至关重要。
Altman形容两人为「完美互补的传奇搭档」。Pachocki作为首席科学家,负责制定公司宏观的研究路线图,而Sidor则负责将这些宏大的愿景付诸实践。
博客地址:https://blog.samaltman.com/jakub-and-szymon
以下是Altman的博客原文(精简版):
近年来,AI的飞速发展有目共睹,ChatGPT的惊艳表现更是将这一切推向了新的高度。我们常常惊叹于技术的伟力,却忽略了其背后闪耀的人类智慧与不懈探索。今天,我想用一分钟的时间,向您讲述这个伟大故事中两位不可或缺的英雄。
在OpenAI,有两位杰出的人才:JakubPachocki和SzymonSidor。没有他们,就没有今天的OpenAI。他们一次次将前沿研究与卓越工程完美结合,攻克了无数看似不可能的难题。
正是他们,在强化学习普遍不被看好的情况下,力排众议,坚持规模化探索其潜力,最终促成了Dota项目的辉煌成就。他们构建了坚实的基础设施,为众多科学突破铺平了道路;他们领导了GPT-4的预训练;他们与Ilya和Lukasz共同孕育了实现推理能力突破的早期思想;他们更是在探索全新范式上取得了卓越进展。
JakubPachocki,我们的首席科学家,曾以「不知疲倦」来形容Szymon,这或许也是他们二人共同的写照。多年来,我亲眼见证了这对传奇搭档如何完美互补,解决了一个又一个难题。他们是OpenAI的基石,是推动AI边界的真正力量。虽然他们未曾站在聚光灯下,但他们的贡献值得被每一个人铭记。
左为JakubPachocki,右为SzymonSidor。两人参加OpenAI的播客节目BeforeAGI。
JakubPachocki在青少年时期专注于竞争性编程,曾六次入围国际信息学奥林匹克竞赛(IOI)决赛,并在2009年获得银牌。2012年,他同时获得了GoogleCodeJam冠军和国际大学生程序设计竞赛(ICPC)世界总决赛金牌。
据他本人所述,15岁时读到PaulGraham的名作《黑客与画家》,深受启发,这让他不仅着迷于编程的技术挑战,更被其作为创造性工具的哲学所吸引。
Pachocki的博士论文题为《GraphsandBeyond:FasterAlgorithmsforHighDimensionalConvexOptimization》,专注于为大规模网络和高维数据设计高效算法,涉及谱图论和凸优化等领域。
尽管这些属于理论课题,但与LLM的工程实践紧密相关,因为现代神经网络的训练本质上是复杂的高维凸优化问题。他在博士期间积累的理论知识,为他理解和解决神经网络扩展过程中遇到的工程瓶颈提供了基础。
在OpenAI将「缩放定律」(即模型能力随计算、数据和参数规模的增长而涌现)确立为核心理念时,Pachocki不仅是该理念的支持者,也具备了在数学层面指导其实施的能力。
他于2017年加入OpenAI,在OpenAIFive项目中领导团队,使AI在电子竞技游戏《Dota2》中击败了人类世界冠军。这一成果增强了公司内部对规模化RL潜力的信心。作为研究总监,他直接领导了GPT-4的开发与预训练工作。
JakubPachocki还入选了今年的《时代》杂志百大AI人物。
SzymonSidor与Pachocki毕业于同一所波兰精英高中,接受了早期计算机科学训练,随后在MIT获得电气工程与计算机科学硕士学位。
Sidor2016年的硕士论文《ReinforcementLearningApproachtoMulti-StageReasoninginNaturalLanguageProcessing》,展现了惊人的前瞻性。
在当时,RL和NLP还被视为两个相对独立的领域,而Sidor已经开始探索两者的交叉点,使用深度Q学习等技术让智能体理解并执行自然语言指令。
这项早期研究,完美契合了OpenAI后来的技术路线。无论是用于对齐ChatGPT的「基于人类反馈的强化学习」(RLHF),还是当前用于训练推理模型的复杂RL框架,都建立在RL与NLP深度融合的基础之上。
在OpenAI,Sidor的贡献涉及多个核心项目。在OpenAIFive中,他参与构建了大规模RL系统及基础设施。在机器人学领域,他参与的「学习灵巧的掌上操控」项目,实现了在模拟环境中训练、在真实机械手上「零样本」迁移的复杂操作。同时,他也对提升智能体探索效率与稳健性的RL核心算法做出了贡献。
随着公司战略重心转向大型语言模型,Sidor也参与其中。他的名字出现在GPT-4技术报告中,并且是推理模型系列(如o1、o3)的关键贡献者。
2023年11月17日,OpenAI董事会突然宣布解雇CEOSamAltman,理由是其「在与董事会的沟通中未能始终保持坦诚」。
这一事件的背后,是公司内部早已存在的深刻分歧:一方是以Altman为代表,主张加速技术研发与商业化应用的「加速派」;另一方则是以时任首席科学家IlyaSutskever为首,更强调AI安全与审慎发展的「安全派」。
在Altman被罢免后的短短几小时内,危机迅速升级。作为对董事会决定的直接回应,时任研究总监的JakubPachocki和高级研究员SzymonSidor,联合AI风险评估负责人AleksanderMadry,毅然向公司提出辞职。
他们的行动是后续员工大规模抗议的导火索之一:超过700名员工签署联名信,要求原董事会辞职并迎回Altman,否则将集体辞职。
巨大的内部压力最终促使董事会妥协。在公司高层安抚员工的内部备忘录中,明确提到目标是「带回Sam、Greg、Jakub、Szymon、Aleksander以及其他同事」,显示了他们在公司内的重要性。
为期五天的风波以Altman的戏剧性回归和董事会重组而告终。危机过后,OpenAI的权力结构发生变化,IlyaSutskever在公司内部的影响力减弱,并于2024年5月正式离职。随后,JakubPachocki被任命为OpenAI的新任首席科学家。
有趣的是,讨论两位主角之外,Altman的评论区全都是KeepStandardVoice和keep4o的标签。
KeepStandardVoice源于OpenAI宣布将于2025年9月9日(也就是今天)正式退役ChatGPT的「标准语音模式」,包括Cove、Juniper、Ember和Breeze等经典语音选项。
这引发了大量用户不满,因为许多人认为标准语音更温暖、自然、更适合日常对话和情感连接,而新推出的「高级语音模式」虽然更先进,但缺乏那种亲切感,无法完全替代。
同时有用户表示,对许多残障人士来说,标准语音是唯一可用的选项,移除它只会制造数字无障碍危机而非进步。
同时,OpenAI推出GPT-5模型后,计划逐步减少或移除GPT-4o的可用性(尽管承诺过会长期支持)。这让依赖GPT-4o的用户感到失望,遂发起keep4o运动。
用户呼吁OpenAI永久保留GPT-4o作为可选模型,而不是完全淘汰。他们强调,AI不应只追求技术升级,而忽略了它带来的情感价值。
这两个话题在Reddit、X及OpenAI官方社区引发了广泛讨论,社交媒体上还出现了许多抗议海报。
本文来自微信公众号“机器之心”(ID:almosthuman2014),编辑:+0,经授权发布。