跳到正文
热点事件持续更新

NVIDIA发布cuTile加速Mamba-2前向传播

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

NVIDIA发布了一种名为CUDA Tile(cuTile)的基于Python的领域特定语言和并行编程模型,旨在通过抽象线程和warp级调度,让开发者能用Python编写并自动优化GPU内核,以提升Mamba-2模型在NVIDIA GPU上的前向传播运行效率。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月20日
  1. NVIDIA · 开发者博客
    NVIDIA 用 CUDA Tile 加速 Mamba-2 的高性能前向传递内核

    NVIDIA 推出 CUDA Tile (cuTile),一种基于 Python 的 DSL 和并行编程模型,用于在 GPU 上实现高性能的 tile 级编程。该工具通过抽象线程和 warp 级调度,使开发者能用 Python 编写 GPU 内核,同时由编译器自动优化性能。cuTile 特别针对 Mamba-2 的前向传递过程进行加速,提升其在 NVIDIA GPU 上的运行效率。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。