Workflow
书生·思客(InternThinker)
icon
搜索文档
大模型首次打破围棋思维「黑盒」,打通科学发现新路径!上海AI Lab发布新一代InternThinker
量子位· 2025-05-23 20:17
围棋AI突破 - 围棋作为衡量AI专业能力的代表性任务,其复杂性和对人类智能的体现具有独特价值[1] - 当前AI在围棋领域虽取得棋力、效率等进步,但推理过程仍为"黑盒",无法用人类语言解释思考过程[1][5] - 上海AI Lab发布新一代书生·思客(InternThinker),成为我国首个具备围棋专业水平且能展示透明思维链的大模型[3] - InternThinker能自然语言点评棋局,如对李世石"神之一手"给出"相当刁钻……重新确立中央控制权"的分析和L10应对策略[4][6] - 该模型具备多样化语言风格,既能鼓励"以攻代守的好手",也能毒舌锐评"不是棋的选择"[7] - 职业棋手评价其棋力在职业3-5段之间,解说思考过程的能力为首次见到[10] InternBootcamp训练体系 - InternBootcamp是为模型打造的"加速训练营",包含超1000个验证环境覆盖复杂逻辑推理任务[12][14] - 通过代码智能体自动化构造,可批量化生成奥赛数学、算法编程、棋类游戏等难度可控的推理任务[14] - 多任务混合强化学习出现"涌现时刻":单一任务无法获得的奖励通过混合训练后成功实现[21] - 混合训练使模型建立任务间关联,如Tapa任务通过融合学习其他任务思考方式后获得正向反馈[21] 通专融合技术路线 - 上海AI Lab提出通专融合技术路线,解决专业化与通用性相互制约的困境[25] - 采用"三层"技术路径:基础模型层构建通用能力,融合协同层打造专家级能力,探索进化层实现AI自我进化[25] - 创新"记忆体+解码器"架构,记忆体负责领域知识记忆(专),解码器负责通用语言组织(通)[26] - 测试时强化学习(TTRL)框架可在无准确标签情况下进行奖励估计,推动强化学习向无监督方向扩展[27] - 构建OREAL强化学习新范式,解决稀疏奖励等三大困局,在7B/32B模型上实现推理能力再提升[28] 多任务性能表现 - InternThinker通过混合强化学习,在数十个任务测试集上平均能力超过o3-mini等国内外主流推理模型[15] - 在特定任务中性能远超当前其他推理大模型[15][18] - PRIME算法在AIME等数学题上,用少量数据使7B模型能力显著超越GPT-4o[28] - MoR框架实现数学解答、科学问答等多任务强化学习的混合训练[28]