Devotd Github
新发现推理与服务

justaresearcher/gpu-unlock-ada v1.1.1 — 公开 TF32·FP8 发射率测量

提供 Linux 内核模块和本地固件生成工具的 justaresearcher/gpu-unlock-ada 在 v1.1.1 中公开了 TF32 与 CUTLASS FP8 GEMM 的测量结果及复现材料。

仓库信息justaresearcher/gpu-unlock-ada ↗

提供 Linux 内核模块和本地固件生成工具的 justaresearcher/gpu-unlock-ada 在 v1.1.1 中公开了 TF32 与 CUTLASS FP8 GEMM 的测量结果及复现材料。

GitHub 项目说明: GPU tensor unlock source for RTX 4090 and experimental RTX 4070 Ti SUPER; firmware generated locally

星标
★ 3.9K
复刻
507
语言
C
许可证
GPL-2.0
最新版本
v1.1.1
查看原始来源 ↗在 GitHub 查看 ↗

justaresearcher/gpu-unlock-ada 提供用于改变 NVIDIA 显卡张量运算路径的 Linux 内核模块和固件生成工具。在 v1.1.1 中,项目公开了张量运算发射率测量结果,以及复现所需的产物与哈希。在相同的功耗上限条件下,TF32 发射率为 1.99 倍,CUTLASS FP8 GEMM 为 1.95 倍。这些是命令发射率的测量结果,并不意味着应用程序性能提升。

该项目的做法是同时处理显卡固件路径与 Linux 内核模块。README 链接了 RTX 4090 与实验性 RTX 4070 Ti SUPER 的单设备测量结果和原始记录。因此可以沿着公开的数值和复现材料,考察特定显卡的张量运算路径。实现语言为 C,许可证为 GPL-2.0。

不过 README 也区分说明,部分命令处理率的上升未必会以同样的幅度转化为实际应用程序性能。实际场景中的 GEMM 加速尚未得到证明。与 Windows 相关的移植也作为独立实验处理,不应与 Linux 模块的支持目标混为一谈。目前资料所支持的只是对有限几款显卡的发射率测量,实际任务的性能提升仍需后续验证。