"tests/vscode:/vscode.git/clone" did not exist on "80ca1e6a3a28a0373dc00c5b4fe956c16de952fa"
[BUGFIX] 修复 Step3p5 MTP 参数加载与 EAGLE lm_head 共享逻辑
fix: - 修复 Step3p5 MTP 在加载 checkpoint 时对可选标量参数的识别逻辑,将 q/k/v zero_point 纳入 optional 参数集合,避免参数校验与加载不一致。 revert: - 回退 EAGLE 中针对 MTP shared_head.head 强制复用 target lm_head 的逻辑,避免与当前 Step3p5 MTP 权重结构产生冲突。 目的: - 降低 Step3p5 MTP 在权重加载阶段的兼容性问题,减少由于 lm_head 共享路径不一致导致的异常行为,方便后续排查和协作。
Showing
Please register or sign in to comment