1. 18 Nov, 2025 1 commit
  2. 07 Nov, 2025 3 commits
  3. 04 Nov, 2025 1 commit
    • zhuwenwen's avatar
      feat: 添加输出占位符功能以优化调度 · 57c0544e
      zhuwenwen authored
      - 在环境变量中引入 `VLLM_ENABLE_OUTPUT_PLACEHOLDERS` 以控制输出占位符的启用。
      - 在 `Request` 类中增加 `num_output_placeholders` 属性,用于跟踪预计生成的 token 数量。
      - 更新调度逻辑以利用输出占位符,确保在解码过程中避免 0-token 停滞。
      - 移除不再使用的最小进度注入相关代码,简化调度器实现。
      57c0544e
  4. 27 Oct, 2025 1 commit
  5. 24 Oct, 2025 1 commit
  6. 17 Oct, 2025 1 commit
  7. 15 Oct, 2025 1 commit
  8. 13 Oct, 2025 3 commits
  9. 10 Oct, 2025 1 commit
  10. 09 Oct, 2025 1 commit
  11. 24 Sep, 2025 3 commits
  12. 22 Sep, 2025 1 commit
  13. 14 Sep, 2025 1 commit
  14. 13 Sep, 2025 3 commits
  15. 09 Sep, 2025 1 commit
  16. 07 Sep, 2025 1 commit
  17. 01 Sep, 2025 1 commit
  18. 19 Aug, 2025 1 commit
  19. 08 Aug, 2025 1 commit
  20. 06 Aug, 2025 1 commit
  21. 04 Aug, 2025 1 commit
  22. 25 Jul, 2025 1 commit
  23. 17 Jul, 2025 1 commit
  24. 10 Jul, 2025 1 commit
  25. 03 Jul, 2025 2 commits
  26. 02 Jul, 2025 2 commits
  27. 01 Jul, 2025 1 commit
  28. 27 Jun, 2025 2 commits
  29. 25 Jun, 2025 1 commit