flashinfer.green_ctx¶
此模块提供用于创建 CUDA 绿色上下文的工具。
绿色上下文创建¶
|
将设备划分为多个 绿色上下文,返回每个组对应的流和 CUdevResource 以及剩余的 SM。 |
|
将设备划分为多个绿色上下文,每个上下文具有固定数量的 SM,返回每个组对应的流和 CUdevResource 以及剩余的 SM。 |
此模块提供用于创建 CUDA 绿色上下文的工具。
|
将设备划分为多个 绿色上下文,返回每个组对应的流和 CUdevResource 以及剩余的 SM。 |
|
将设备划分为多个绿色上下文,每个上下文具有固定数量的 SM,返回每个组对应的流和 CUdevResource 以及剩余的 SM。 |