用 10% GPU 跑通万亿参数 RL!马骁腾拆解万亿参数大模型的后训练实战

用 10% GPU 跑通万亿参数 RL!马骁腾拆解万亿参数大模型的后训练实战

整理 | 梦依丹

出品 | ZEEKLOG(ID:ZEEKLOGnews)

左手是提示词的工程化约束,右手是 Context Learning 的自我进化。

在 OpenAI 新发布的《Prompt guidance for GPT-5.4》中,反复提到了 Prompt Contracts(提示词合约)。要求开发者像编写代码一样,严谨地定义 Agent 的输入边界、输出格式与工具调用逻辑,进而换取 AI 行为的确定性。

但在现实操作中,谁又能日复一日地去维护那些冗长、脆弱的“提示词代码”?

真正的 Agent,不应只靠阅读 Context Engineering,更应该具备 Context Learning 的能力。

为此,在 4 月 17-18 日的 2026 奇点智能技术大会上,我们诚邀 Macaron AI 首席科学家、Mind Lab Director 马骁腾带来一场直击 Agent 进化本质的深度分享,让 Agent 从“听指令”进化到“涨经验”。

马骁腾是谁?

提到马骁腾,笔者脑海首先闪现的是强化学习、Agent、1500+……

作为清华大学自动化系的博士、博士后,马骁腾在产业界和学术界有着扎实的底蕴。他在强化学习相关领域发表了 30 余篇顶会论文,谷歌学术引用超过 1500 次。

现在,他是 Macaron AI 首席科学家,也是 Mind Lab 的掌舵人。

他带队研发了面向万亿参数模型的 LoRA-RL 训练底座—— MinT,成功实现了端到端的万亿参数推理强化学习。

以万亿参数模型(如 Kimi K2)为例,该系统所需的 GPU 数量仅为传统全参数 RL 的约 10%。这彻底改变了大模型后训练的经济学,使 RL 能够大规模落地到更多产品和团队中。(核心解读:https://macaron.im/mindlab/research/building-trillion-parameter-reasoning-rl-with-10-gpus)

从 Context Engineering 到 Context Learning:万亿参数大模型的后训练实战

在 2026 奇点智能技术大会上,马骁腾将带来 《迈向经验智能:从 Context Engineering 到 Context Learning》 的深度分享,直击当前 AI Agent 开发与落地的核心痛点。

痛点:Prompt 工程的“边际效应递减”

当前的 Agent 开发,陷入了一个“堆砌上下文”的怪圈。

为了让 Agent 应对动态环境(比如操作一个不断更新的 App 界面),工程师们不得不编写越来越长、越来越复杂的 Prompt。但这带来了两个无法回避的问题:

  • 扩展性受限: 人工编排永远赶不上环境的变化速度;
  • 经验无法复用: Agent 每次任务都是“从零开始”,上一次的成功或失败经验,无法沉淀为模型的能力。

解法:Context Learning(在交互中学习)

马骁腾提出的 Context Learning,核心在于“经验的内化”。

通过强化学习,让模型在真实的交互数据中自主试错、积累经验,并将这些经验刻进模型参数里。

实战干货:MinT 底座与 Macaron AI 案例

为了证明这条路走得通,马骁腾将在现场拆解 Mind Lab 的工程实践:

  • MinT 面向万亿参数模型的 LoRA-RL 训练底座:支撑高吞吐、低成本的强化学习快速迭代。并以 Macaron AI 模型训练为案例,展示如何利用 Context Learning 教会模型操作 Dynamic UI,将交互经验沉淀为可复用的模型能力与训练管线。
  • Macaron AI 模型案例:用 Context Learning 训练 Dynamic UI 交互能力

对于参会者而言,这场分享的直接价值在于:

  • 获得可落地的 RL Infra 建设思路:了解如何搭建一个像 MinT 这样,能够支撑大模型低成本、高吞吐强化学习迭代的基础设施;
  • 将 Context Learning 从理念变为工程现实的前提;
  • 理解可靠性与适应性的平衡术:明白在什么场景下仍需依赖 Context Engineering 确保可靠,又在什么场景下可以放手让模型通过 Context Learning 自主进化,从而设计出更健壮、更灵活的 Agent 系统。

2026 奇点智能技术大会

马骁腾的 Context Learning,只是 2026 奇点智能技术大会众多硬核议题中的一环。

面对“未来没有全栈,只有 Agent 工程师”的行业剧变,我们需要的不只是几场演讲,而是一份可被验证的、成体系的工程经验。

4 月 17-18 日,由 ZEEKLOG 与 奇点智能研究院联合主办的「2026 奇点智能技术大会」 将在上海环球港凯悦酒店隆重召开。

  • 顶尖阵容: 汇聚 50+ 位站在变革最前沿的技术领袖,来自 微软、BAT、京东、快手等一线大厂;
  • 硬核议题: 覆盖 Agent 系统、世界模型、AI 原生研发、AI Infra 等 12 大前沿专题。

这里没有空泛的预测,只有扎实的复盘与当下的解法与前沿的探索。

与此同时,2026 奇点智能技术大会同步开放多种合作形式:

  • 技术生态合作伙伴
  • 企业专场共建
  • 行业解决方案联合展示
  • ……

我们期待与更多长期主义者一起,为 AI 时代留下可被验证、可被复用的工程经验。

图片

扫码下方二维码

提前预约 2026 奇点智能技术大会全套 PPT 资料

图片

官方网站:www.ml-summit.org

购票热线:400-821-5876

购票咨询:[email protected]

企业合作:[email protected]

演讲申请:[email protected]

媒体联系:[email protected]

↓↓ 点击「阅读原文」,了解「2026  奇点智能技术大会」更多信息!

Read more

【Python缓存过期清理实战指南】:掌握高效内存管理的5大核心策略

第一章:Python缓存过期清理的核心概念 在构建高性能Python应用时,缓存机制是提升响应速度和降低系统负载的关键手段。然而,若不妥善管理缓存的生命周期,可能导致内存泄漏、数据陈旧等问题。因此,理解缓存过期与自动清理机制至关重要。 缓存过期的基本原理 缓存过期指的是为缓存项设置一个有效时间窗口,超过该时间后,该项被视为无效并可被清除。常见策略包括: * 固定过期时间(TTL):每个缓存项在写入时设定生存时间 * 滑动过期(Sliding Expiration):每次访问缓存项时重置其过期时间 * 最大容量淘汰:当缓存数量达到上限时,按策略(如LRU)移除旧项 使用字典实现带TTL的简单缓存 以下代码展示如何利用time模块和字典实现基础的过期清理逻辑: import time class TTLCache: def __init__(self, ttl): self.cache = {} # 存储键值对及过期时间 self.ttl = ttl # 单位:秒 def set(self, key, value)

By Ne0inhk
Python 进程池(ProcessPoolExecutor)全面使用教程

Python 进程池(ProcessPoolExecutor)全面使用教程

一、进程池概述 进程池(ProcessPoolExecutor)是 Python 中用于并行执行任务的强大工具,尤其适合CPU密集型操作。与传统的多进程编程相比,它提供了更简单、更高级的接口。 适用场景: 1. CPU密集型任务(数学计算、图像处理等) 2. 需要并行处理独立任务的情况 3. 需要限制并发进程数量的场景 4. 需要获取任务执行结果的场景 二、基本使用 from concurrent.futures import ProcessPoolExecutor import time # CPU密集型计算函数defcalculate_square(n):print(f"计算 {n} 的平方...") time.sleep(1)# 模拟耗时计算return n * n # 使用进程池with ProcessPoolExecutor(max_

By Ne0inhk
Python的前世今生,如何与AI大模型结下不解之缘

Python的前世今生,如何与AI大模型结下不解之缘

从一门诞生于圣诞假期的“小众脚本语言”,到如今AI大模型时代的“第一开发语言”,Python走过了三十余年的迭代之路。 这段跨越三十余年的征程,既是Python“顺势而为、自我革新”的成长史,更是其与时代需求同频共振的必然。而它与AI大模型结下的不解之缘,从来都不是偶然相遇,而是Python自身的核心特性,与AI大模型开发需求深度契合、双向奔赴的结果——正是这份契合,让Python在AI浪潮中脱颖而出,成为大模型开发的首选语言。 一、Python的前世:偶然诞生,默默沉淀 1989年末,荷兰程序员吉多·范罗苏姆在阿姆斯特丹的研究中心,为解决当时ABC语言扩展性不足、脚本编写繁琐的痛点,闲暇时敲出了Python的第一行代码,语言命名源于他喜爱的电视喜剧《巨蟒剧团之飞翔的马戏团》。 1991年,Python 0.9正式发布,自带列表、字典等核心数据结构与异常处理功能;2000年Python 2.0推出,新增Unicode支持与垃圾回收优化;2008年Python 3.0发布,清理冗余代码、完善Unicode支持,完成向现代编程语言的跨越;此后数十年持续迭代,截至2023年,Pyth

By Ne0inhk