瞿才应

华东师范大学(985) · 2027 届本科

瞿才应

大模型算法/推荐算法

在阶跃星辰做 Personal Agent 模型的后训练数据,在腾讯天美做过游戏服务端和冒险家战斗的强化学习训练链路,在哔哩哔哩做过 A/B 实验平台的分析 Agent 和评测平台。项目做过 SQL 分析 Agent 的后训练、生成式召回与推荐模型的离线评测偏差研究、秒杀下单系统、扣除交易成本的机器学习选股研究,以及已上架 Agensi 技能市场的 AI 编程用量看板。

发邮件 GitHub
  • 阶跃星辰Agent 后训练数据算法实习生2026.11 – 至今
  • 腾讯 · 天美 J1《怪物猎人:旅人》后台开发实习生2026.07 – 2026.11
  • 哔哩哔哩 · 数据平台部AI Agent 研发实习生2026.03 – 2026.07
01

项目

前四个项目各有一页图文讲解,链接在项目末尾。五个项目的代码都在 GitHub 公开仓库里,后训练和选股各配了一部讲解视频。

preregisteredBIRD · Qwen3-4B
各轮预注册实验的主比较与判定
版本主比较判定
v0.3修复式 SFT 对比普通 SFT反向
v0.5拒绝采样微调对比原始模型成立
v0.732B 老师轨迹对比自采不成立
v0.8混入 235B 老师轨迹对比自采成立
v0.9在线 RL 对比起点未过线
v0.10全参数 RL 对比 LoRA RL反向
v0.11边界题 RL 对比起点成立
v0.12在线蒸馏对比离线蒸馏不成立
pass@k边界题 RL 对比起点,每题采 64 次收窄了能力边界
BIRD dev 执行准确率
57.9%
原始模型 49.5%
边界题 RL 对比起点
+2.6点
项目判分,95% 区间 [+0.7, +4.7]
测试题
1501
数据库训练时未见
explainerB 站 · 10:32

P/01个人项目

SQL 数据分析 Agent 后训练

给 Qwen3-4B 做多轮 SQL 分析 Agent 的后训练,在 BIRD 上依次比较拒绝采样微调、偏好优化、大模型蒸馏和在线强化学习,每轮先写预注册再上 H20 跑,4B 的官方执行准确率从 49.5% 提到 57.9%。

  • Agent 与评测模型在只读 SQLite 沙箱里先查表、试跑 SQL、看到结果再提交,评测按数据库隔离、全程看不到金标;判分比官方 EX 更严,主比较用按数据库聚类的 bootstrap 区间判定,结论不成立也照实记录。
  • 离线训练发现只监督最终答案会把“先查再交”的习惯训没,改为对执行验证过的整条多轮轨迹做拒绝采样微调,再接 DPO;235B 老师先在开发集上证明比学生强 5 个点以上,才用来蒸馏、补到学生做不对的题上。
  • 在线强化学习以执行结果为奖励做 RLOO,LoRA 每步热更新到 vLLM 采样端;对照里 FSDP2 全参数分布式版本反而比 LoRA 低 4.2 个点,在线蒸馏也没超过离线蒸馏;最终只在起点时对时错的边界题上训练,按更严的项目判分比起点再高 2.6 个点、过了预注册检验。
  • Qwen3-4B
  • LoRA
  • 拒绝采样微调
  • DPO
  • RLOO
  • FSDP2
  • vLLM
protocolKuaiRand · KuaiRec
  1. 数据KuaiRand 常规与随机曝光日志,KuaiRec 近全观测矩阵
  2. 模型7 个精排、4 个召回;语义 ID 生成式召回、SASRec、双塔
  3. 冻结主评测在正式测试前写定规则和模型组,测试集只开一次
  4. 比较共同用户每人等权;同一份列表算稠密、加权、借用曝光
  5. 检验用户级 bootstrap 判定差距有没有变,Holm 校正
  6. 校准随机曝光校准集上按视频热度分组做 Platt
语义 ID 对双塔
−0.032
同一批用户、同一份列表只换观测目标后的 Recall@100 差,稠密测试上 +0.006
logQ 双塔领先
0.005
随机曝光 Recall@100,仍显著第一;常规测试 0.241
混训后随机测试
+0.026
UAUC,LightGBM 补充实验,混入约 5% 随机曝光数据

P/02个人项目

短视频生成式召回、精排与曝光偏差评测

用快手开源 KuaiRand、KuaiRec 两份数据,以随机曝光日志和近乎全观测的用户 × 视频矩阵作对照,检验常规离线评测会不会把召回、精排模型的比较结论和点击率预估带偏;主评测的规则和模型组在开测试集前冻结。

  • 生成式召回实现基于 RQ-VAE 语义 ID 和前缀树约束解码的生成式召回,与 SASRec、logQ 双塔对比;同一批用户、同一份推荐列表,只在别人实际被推过的视频里算命中,语义 ID 对双塔由领先 0.006 变为落后 0.032。
  • 召回与精排在 KuaiRand 上构建 ItemCF、logQ 双塔等 4 个召回和 DCN-v2、DIN、MMoE 等 7 个精排模型;召回差距到随机曝光上大幅压缩(logQ 双塔对双塔的 Recall 比由 2.61 降到 1.23,仍排第一),精排 21 对差距变化都未检出显著。
  • 校准与去偏模型在随机曝光上整体高估、越冷门高估越多,按热度分组 Platt 校准后 7 个模型的 LogLoss 都低于全局 Platt;补充实验里 LightGBM 训练集混入约 5% 随机曝光数据,随机曝光测试 UAUC 提高 0.026。
  • PyTorch
  • RQ-VAE 语义 ID
  • SASRec
  • LightGBM
  • DCN-v2
  • DIN
  • MMoE
  • 双塔召回
  • logQ
  • 概率校准
flow下单主链路
  1. 请求k6 压测流量进入 Spring Boot 入口
  2. 限流Redis ZSET 滑动窗口
  3. 防重复用户 × SKU 幂等
  4. 预扣库存Redis Lua 原子扣减
  5. 可靠投递本地消息表 + RabbitMQ 异步削峰
  6. 落库MySQL 唯一索引与条件更新兜底
超卖 / 重复下单
0
各轮压测
售罄尾部 p99
12ms
优化前 98 ms
故障与负载场景
9/9
同机三个 JVM

P/03个人项目

Mini 秒杀高并发下单系统

聚焦秒杀下单主链路,解决库存不超卖、用户不重复下单、瞬时流量不打穿数据库。

  • 下单链路Redis Lua 原子预扣库存,MySQL 唯一索引兜底,订单经本地消息表和 RabbitMQ 异步落库,Redis 宕机时宁可拒单也不超卖。各轮压测零超卖、零重复下单,售罄尾部 p99 由 98 ms 降到 12 ms。
  • 多实例库存协调进程在预扣和落库之间被暂停或强杀时,库存不丢也不多退,醒来的旧节点过不了租约和版本号校验。同机三个 JVM 注入 9 个故障与负载场景,全部通过,协议多出的 Redis 往返也已压回改造前水平。
  • 性能瓶颈入口线程大多卡在等数据库连接,我没有扩连接池,而是削减入口的同步 SQL,单实例入口稳定档由 3000/s 提到 4000/s。换到独占云服务器后又定位到 RabbitMQ 发布端 channel 缓存不足,调整后由 3500/s 提到 4000/s。
  • Java 17
  • Spring Boot 3
  • Redis Lua
  • RabbitMQ
  • MySQL
  • k6
protocol研究流程
  1. 数据沪深全 A,保留 245 只退市股,只用当时可见的数据
  2. 信号10 个量价特征;公式因子库在训练窗内做 FDR 筛选
  3. 预测LightGBM 滚动样本外,2020–2024 年
  4. 组合成本惩罚加换手上限,或风险模型加均值方差
  5. 检验块 bootstrap 主要检验,按事先写定的规则冻结
  6. 前向2025 年保留期只开一次,之后每日模拟盘
样本外日秩 IC
0.086
简单方案
年化信息比率
0.41
扣除交易成本后
复杂对简单
p = 0.84
未显著跑赢
explainerB 站 · 8:43

P/04课题组研究项目

成本约束下的机器学习选股与滚动验证

研究机器学习选股扣除交易成本后还剩多少超额。在沪深全 A 上做 2020–2024 年滚动样本外回测,冻结的方案现在每天收盘后跑模拟盘。

  • 数据与回测样本保留 245 只区间内退市股,只用当时可见的数据;账本按 T+1、涨跌停、停牌和整手逐笔成交。市盈率、市净率数据抽查发现可能含未来信息,按事先定的规则,183 个因子里的估值因子整组弃用。
  • 检验与结论10 个量价特征加成本约束的简单方案,样本外日秩 IC 0.086,扣除成本后年化信息比率只有 0.41。因子库加均值方差组合的复杂方案在块 bootstrap 检验下没有显著跑赢它(p = 0.84),按看结果前写定的规则冻结简单方案,2025 年保留期只开一次。
  • 归因与模拟盘自建风险模型归因显示,开发期超额主要来自低特质波动、低流动性两个风格,分数剔除行业和风格后 IC 只剩约四分之一。模拟盘每天收盘后由云端定时任务运行,交易代码用哈希锁定,记录只追加,日报逐日拆解风格贡献。
  • Python
  • pandas
  • LightGBM
  • BH-FDR
  • Clarabel
  • BaoStock
demo虚构数据演示
AI 编程用量看板的演示页:估算成本、总用量、请求数、缓存读取占比和每日估算成本柱状图,数据均为虚构
本机汇总
约 3秒
同一批日志,原来约 8 秒
外部依赖
0
只用 Node.js 内置模块
单文件 Skill
27KB
安装包共 11.6 KB

P/05个人项目 · 已上架 Agensi 技能市场

AI 编程用量看板

读取本机 Claude Code、Codex 会话日志,按请求去重后汇总多账号的用量、估算成本和输出速度,只用 Node.js 内置模块、可离线演示;按修改时间跳过统计窗口外的日志,本机汇总由约 8 秒降到约 3 秒,并打包成单文件 Agent Skill。

  • Node.js
  • Agent Skill
  • 日志解析
  • 请求去重
  • 成本估算
02

实习经历

  1. 2026.11至今

    阶跃星辰

    Agent 后训练数据算法实习生数据合成 / Rubric / 评测

    负责 Personal Agent 模型(全双工语音 + 手机 GUI、工具调用)的后训练数据策略,覆盖 mid-training、SFT 数据和评测集。

    • 轨迹合成与过滤用 LLM 按场景分类树合成“多轮用户对话 + 工具执行轨迹”,控制任务分布、难度与长尾;过滤先走规则、再用 LLM-as-Judge,Judge 与人工金标对齐后放量,按抽检准确率迭代链路。
    • 错误归因与定向补数据围绕模型突出问题做错误归因(数据、环境还是模型),针对短板定向补数据,训后在隔离评测集上验证;制定全双工打断、附和、犹豫和工具调用的评分 Rubric。
  2. 2026.072026.11

    腾讯 · 天美 J1

    《怪物猎人:旅人》后台开发实习生C++20 / Go

    负责游戏服务端的高并发读链路、聊天推送、过载保护与压测治理,以及冒险家战斗强化学习训练链路。

    • 读链路与降级榜单读请求由同榜串行改为并发处理,合并单请求内的重复查询,典型路径 DB 访问由 2 次降到 1 次。搭了按榜单资源控制、以整机 CPU 兜底的过载降级,进出阈值分离加连续周期判定来抑制抖动,支持配置热更新和快速回滚。
    • 聊天与消息拷贝完成私聊、小频道和大频道的分层路由改造;用火焰图定位消息体深拷贝热点,改为常量引用和缓冲区借用交换。专项压测中单实例世界频道单 key 稳定无超时的上限约 2200 TPS。
    • 压测治理修复压测客户端下行确认异常导致的缓存无法清理和指标失真,恢复可信基线;退队链路 DB 访问由 3 次降到 1 次,按既有压测数据估算 CPU 利用率降约 5 个百分点。
    • 冒险家战斗强化学习把 UE5 客户端改造成无人值守的训练环境,模型像玩家一样按 HUD 打龙;按技能槽抽象通用操作接口并做动作掩码,新增冒险家无需改代码;经 PPO 训练,早期小样本评测中太刀角色胜场由 0/11 提升到 6/10,仍在内部验证。
  3. 2026.032026.07

    哔哩哔哩 · 数据平台部

    AI Agent 研发实习生RAG / 评测 / Runtime

    面向公司级 A/B 实验平台,用 Python 建设对话式实验分析 Agent,并独立搭建跨团队评测平台。

    • 知识检索近 700 份知识改为按索引、概览、详情三层渐进加载,用语义路由和工具并发召回替代串行检索。22 条配对用例上,文件召回率由 73% 提到 96%,知识阶段平均耗时由 18 s 降到 10 s,token 由 117k 降到 71k。
    • 工具编排统一注册显著性分析、样本量与 MDE 互算、CUPED 方差缩减 SQL 等 11 类分析工具,加入分层超时、Presto→Spark 降级和连续失败熔断;模型生成的代码在子进程沙箱里执行。
    • 评测平台发版验收由人工改为无人值守批量回归,一轮验收人力约降九成。按知识、SQL、结论、过程建断言,接入轨迹造例、LLM Judge 和 Bad Case 回流。
    • Runtime 与 MCP统一 SSE 与 MCP 两类入口的执行内核,支持断线回放、外置 Checkpoint 和服务重启后续跑。实验分析流程开放为 MCP 工具后,上线 3 天在没有专项推广的情况下,有 17 名用户发起 144 次对话。
03

实践经历

  • AI 科普短视频

    抖音、B 站个人账号AI 视频 / 程序化生成

    做 AI 技术与数理科普短片、画面全由代码生成的 MV,已发布 10 多条,累计播放超 1.7 万。自定选题、风格规范和验收标准,调研、写稿、分镜和渲染交给 Claude Code 等 AI 代理(HyperFrames、WebGL 着色器、语音合成),发布前逐条核对论文和源码等出处。

  • 跨年级学习资料共享平台

    发起人、负责人网站开发 / 运营

    带 3 位同学搭建跨年级资料共享网站,负责网站开发、收录规则和整体推进。把资料缺口拆成可认领的任务,设署名和发布前核对,一个学期收录 40 多门课程、300 多份资料,实习前交接给低年级同学维护。

  • 原创校园实景解谜活动

    发起人、主策划活动策划 / 用户测试

    带 4 位同学完成剧情、谜题与现场执行,正式活动 50 多人参与。按试玩反馈把熟人梗换成材料内可得的线索、设逐级提示,两轮盲测后分批分线入场。

04

技能

后训练
SFT(拒绝采样微调)、DPO、离线与在线蒸馏、在线强化学习(RLOO);PyTorch / LoRA / vLLM / FSDP2,训练与采样同卡协同、LoRA 每步热更新,235B 模型张量并行推理。
推荐模型
生成式召回(RQ-VAE 语义 ID)与 SASRec、ItemCF、双塔(in-batch 负采样、logQ 校正)召回,精排 LightGBM / DCN-v2 / DIN / 多目标 MMoE;特征工程按时间切分,统计特征交叉拟合、用户历史序列建模。
评测与实验
防泄漏评测、GAUC / UAUC、概率校准;预注册、bootstrap 区间与 Holm 校正;A/B 分析工具。
Agent / 编程
多轮 Tool Use、MCP、RAG 与上下文工程;Python / SQL / C++20 / Go,数据结构与算法。
工程
Java / Spring Boot、FastAPI、Redis、MySQL、RabbitMQ,限流、幂等、熔断与过载降级;Node.js、TypeScript / Vue;Claude Code、Codex 与 Agent Skill 编写。
05

教育

2027 届

华东师范大学(985)

本科

主修数据结构与算法、操作系统、计算机网络、数据库原理,另修机器学习、人工智能、数值分析、最优化与数学建模。