跳到正文
热点事件持续更新

JuiceFS 分享 HeyGen 全球 GPU 集群存储实践

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

JuiceFS 分享了 HeyGen 基于 JuiceFS 企业版构建的跨云统一命名空间与多级缓存架构,用于解决全球 10+ GPU 集群的数据共享与冷启动问题。该架构已在生产环境运行一年以上,支撑约 6 PB 数据、约 10 亿个 inode 和 1,000–2,000 个客户端节点。 按 JuiceFS 的介绍,该方案通过统一文件命名空间和多级缓存预热优化推理业务中模型与依赖的分发加载,并利用 RDMA 高带宽传输结合数据集批次预加载减少训练中的 GPU 等待。相关能力适用于 JuiceFS 企业版 5.3 及以上版本,客户端和缓存节点两端均需配置相应的 rdma-network,具体效果会随工作负载和运行环境变化。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. 博客园
    HeyGen 如何让全球 10+ GPU 集群训练不再等待数据——JuiceFS 存储实践

    HeyGen 基于 JuiceFS 企业版构建跨云统一命名空间与多级缓存架构,解决全球 10+ GPU 集群的数据共享与冷启动问题。该架构已在生产环境运行一年以上,支撑约 6 PB 数据、约 10 亿个 inode 和 1,000–2,000 个客户端节点。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。