Agentic RL 入门

按学习顺序整理:先建立 Agentic RL 的基础和代码直觉,再进入长程任务里的信用分配、模型架构、算法接口、skill-based 方法和多轮工具调用。

Agentic RL入门1:基础、代码 从 trajectory、environment、reward、policy update 到 Search-R1 等代码案例。 Agentic RL入门2:信用分配 解释长程多步任务中,如何把最终 outcome reward 分配到中间 decision steps。 Agentic RL入门3:transformer 架构 位置编码 / Attention 全家桶(MHA·MLA·DSA·NSA·SSM·MoBA)/ 归一化全家桶 / MoE / MTP / KV Cache。 Agentic RL入门4:Credit 错分与算法接口 从 credit 错分问题出发,梳理 Agentic RL 中的算法接口和关键方法。 Agentic RL入门5:Skill-based Agentic RL 从 Skill-RM、StraTA、Maestro、Evolving-RL 到 SDAR,梳理 skill-based Agentic RL 的主线方法。 Agentic RL入门6:多轮工具调用 围绕 τ-bench,串起 TARL、MT-GRPO、MUA-RL、CodeGym 和 Fission-GRPO 的多轮工具调用 RL 方法。 如何在 5 万张国产芯片训练出 1.6T 万亿参数模型? 国产万亿参数模型系统工程拆解,含小红书长图切片。 GLM-5.2 长程任务的 RL 怎么做? 拆解 CompactionRL 与 SAO:长轨迹压缩、跨段信用分配和 single-rollout 异步训练。