跳到正文
热点事件持续更新

复盘:判否两项 MoE 优化,落地 CUDA Graph

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

Kestrel_VLLM 在掘金发布 CUDA 迁移复盘(系列第 13 篇):在 RTX 5090 上迁移 Qwen3-30B-A3B MoE 时,用 stub 探针测得 MoE FFN 属内存受限,据此判否了 MoE FFN Tiling 与 Tensor Core 两项优化,最终落地 CUDA Graph,获得 1.12× 加速。 这两项优化原是计划书中预期收益最大的改动,实测证据推翻了该预期,作者因而改以 CUDA Graph 完成本轮迁移。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月19日
  1. 掘金
    Kestrel_VLLM - 13 · 为什么排除 MoE FFN Tiling 与 Tensor Core

    Kestrel_VLLM 在 RTX 5090 上迁移 Qwen3-30B-A3B MoE 时,实测否掉了计划书中预期收益最大的 MoE FFN Tiling 与 Tensor Core 优化。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。