CANN/asc-devkit半精度算术函数
__hfmax2_relu
【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言,原生支持C和C++标准规范,主要由类库和语言扩展层构成,提供多层级API,满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit
产品支持情况
- Ascend 950PR/Ascend 950DT:支持
- Atlas A3 训练系列产品/Atlas A3 推理系列产品:不支持
- Atlas A2 训练系列产品/Atlas A2 推理系列产品:不支持
- Atlas 200I/500 A2 推理产品:不支持
- Atlas 推理系列产品AI Core:不支持
- Atlas 推理系列产品Vector Core:不支持
- Atlas 训练系列产品:不支持
功能说明
计算输入half2类型数据各分量的乘加的结果(前两个输入相乘后与第三个输入相加),并遵循CAST_RINT模式对结果进行舍入。负数结果置为0。
函数原型
half2 __hfmax2_relu(const half2 x, const half2 y, const half2 z)参数说明
表1参数说明
| 参数名 | 输入/输出 | 描述 |
|---|---|---|
| x | 输入 | 源操作数。 |
| y | 输入 | 源操作数。 |
| z | 输入 | 源操作数。 |
返回值说明
输入数据各分量乘加的结果。本接口受全局饱和寄存器的影响,特殊值如下:
| x分量 | y分量 | z分量 | 非饱和模式返回值 | 饱和模式返回值 |
|---|---|---|---|---|
| 任一值为nan | nan | 0 | ||
| inf | ±0 | 任意值 | nan | 0 |
| x*y=±inf | 同号inf | nan | 0 | |
| x*y+z为inf | inf | ASCRT_MAX_NORMAL_FP16 | ||
| x*y+z≤0 | 0 | 0 | ||
约束说明
无
需要包含的头文件
使用该接口需要包含"simt_api/asc_fp16.h"头文件。
#include "simt_api/asc_fp16.h"调用示例
SIMT编程场景:
// 使用短向量可提升数据搬运效率 __global__ __launch_bounds__(1024) void simt_hfmax2_relu(half* x, half* y, half* z, half* dst, uint32_t input_total_length) { uint32_t idx = blockIdx.x * blockDim.x + threadIdx.x; // 每个线程处理1个half2类型的数据,即2个half类型的数据,因此idx >= input_total_length / 2的线程不处理数据 if (idx >= input_total_length / 2) { return; } half2* input1 = (half2*)x; half2* input2 = (half2*)y; half2* input3 = (half2*)z; half2* out = (half2*)dst; out[idx] = __hfmax2_relu(input1[idx], input2[idx], input3[idx]); }SIMD与SIMT混合编程场景:
// 使用短向量可提升数据搬运效率 __simt_vf__ __launch_bounds__(1024) inline void simt_hfmax2_relu(__gm__ half2* x, __gm__ half2* y, __gm__ half2* z, __gm__ half2* dst, uint32_t input_total_length) { uint32_t idx = blockIdx.x * blockDim.x + threadIdx.x; // 每个线程处理1个half2类型的数据,即2个half类型的数据,因此idx >= input_total_length / 2的线程不处理数据 if (idx >= input_total_length / 2) { return; } dst[idx] = __hfmax2_relu(x[idx], y[idx], z[idx]); } __global__ __vector__ void compute_kernel(__gm__ half* x, __gm__ half* y, __gm__ half* z, __gm__ half* dst, uint32_t input_total_length) { asc_vf_call<simt_hfmax2_relu>(dim3(1024), (__gm__ half2*)x, (__gm__ half2*)y, (__gm__ half2*)z, (__gm__ half2*)dst, input_total_length); }
【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言,原生支持C和C++标准规范,主要由类库和语言扩展层构成,提供多层级API,满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit
创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考
