Hugging Face Blog·· 2026-05-27精选AI 评分62
Hugging Face 在 TRL 中实现 Delta Weight Sync，用 Hub Bucket 传输万亿参数增量
Shipping a Trillion Parameters With a Hub Bucket: Delta Weight Sync in TRL
AI 导读
Hugging Face 在 TRL 中落地 Delta Weight Sync：只把 RL 优化步之间发生变化的 bf16 权重编码成稀疏 safetensors 文件，上传到 Hugging Face Bucket，再由 vLLM 拉取应用。
推荐理由
TRL 把稀疏增量权重同步落到可 pip 安装的实现，读者可据此判断跨机房异步 RL 训练的成本结构变化。
来源：Hugging Face Blog · huggingface.co