“硅仙人”吐槽英伟达 CUDA:是树沼,而非护城河

2024-02-20 19:48:25

  有“硅仙人”称号的吉姆・凯勒近日发布推文,表示“

  凯勒在后续推文中表示:

  CUDA 毫无美感,只是粗暴地堆砌而成。 基本上没有人会写 CUDA,即便是写了相关代码,其执行速度也不快。 这也是为何 Triton、Tensor RT、Neon、Mojo 孕育而出的原因。注:CUDA 工具包是 NVIDIA 为开发人员提供的一个软件套件,它让开发人员使用 NVIDIA 的图形处理单元来运行通用计算任务,特别是那些需要大量并行处理能力的任务。

  凯勒认为 CUDA 像 X86 一样,英伟达为了确保软件和硬件的向后兼容性,逐步增加功能的过程中拖慢了性能,增加了程序开发的难度。与此同时,许多开源软件开发框架可以比 CUDA 更高效地使用。

  就连 Nvidia 本身也有不完全依赖 CUDA 的工具。

  例如,Triton Inference Server 是 Nvidia 的一款开源工具,可简化人工智能模型的大规模部署,支持 TensorFlow、PyTorch 和 ONNX 等框架。

  Triton 还提供模型版本化、多模型服务和并发模型执行等功能,以优化 GPU 和 CPU 资源的利用率。

下一篇:设计更方正,消息称三星 Galaxy Z Fold6 手机屏幕 R 角接近直角
上一篇:吉利帝豪 L HiP 龙腾版插混轿车上市,100km 纯电 8.98 万元起
返回顶部小火箭