CANN/asc-devkit SIMT bfloat16x2乘法函数

__hmulx2

【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言，原生支持C和C++标准规范，主要由类库和语言扩展层构成，提供多层级API，满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit

产品支持情况

功能说明

计算两个bfloat16x2_t类型数据各分量的相乘结果，并遵循CAST_RINT模式对结果进行舍入。

函数原型

bfloat16x2_t __hmulx2(const bfloat16x2_t x, const bfloat16x2_t y)

参数说明

表 1参数说明

返回值说明

输入数据各分量相乘的结果。相乘的分量x和y满足：

• 当输入和结果都不为nan时，x*y的符号为x和y符号的异或。
• x为非0值，y为±inf时，返回值符号由x和y的符号异或决定，值为inf。
• x为±0，y为±inf时，返回值为nan。
• x为±0，y为有限值时，返回值符号由x和y的符号异或决定，值为0。
• x，y任意一个为nan时，返回值为nan。

约束说明

无

需要包含的头文件

使用该接口需要包含"simt_api/asc_bf16.h"头文件。

#include "simt_api/asc_bf16.h"

调用示例

• SIMT编程场景：

  // 使用短向量可提升数据搬运效率 __global__ __launch_bounds__(1024) void simt_hmulx2(bfloat16_t* x, bfloat16_t* y, bfloat16_t* dst, uint32_t input_total_length) { uint32_t idx = blockIdx.x * blockDim.x + threadIdx.x; // 每个线程处理1个bfloat16x2_t类型的数据，即2个bfloat16_t类型的数据，因此idx >= input_total_length / 2的线程不处理数据 if (idx >= input_total_length / 2) { return; } bfloat16x2_t* input1 = (bfloat16x2_t*)x; bfloat16x2_t* input2 = (bfloat16x2_t*)y; bfloat16x2_t* out = (bfloat16x2_t*)dst; out[idx] = __hmulx2(input1[idx], input2[idx]); }

• SIMD与SIMT混合编程场景：

  // 使用短向量可提升数据搬运效率 __simt_vf__ __launch_bounds__(1024) inline void simt_hmulx2(__gm__ bfloat16x2_t* x, __gm__ bfloat16x2_t* y, __gm__ bfloat16x2_t* dst, uint32_t input_total_length) { uint32_t idx = blockIdx.x * blockDim.x + threadIdx.x; // 每个线程处理1个bfloat16x2_t类型的数据，即2个bfloat16_t类型的数据，因此idx >= input_total_length / 2的线程不处理数据 if (idx >= input_total_length / 2) { return; } dst[idx] = __hmulx2(x[idx], y[idx]); } __global__ __vector__ void compute_kernel(__gm__ bfloat16_t* x, __gm__ bfloat16_t* y, __gm__ bfloat16_t* dst, uint32_t input_total_length) { asc_vf_call<simt_hmulx2>(dim3(1024), (__gm__ bfloat16x2_t*)x, (__gm__ bfloat16x2_t*)y, (__gm__ bfloat16x2_t*)dst, input_total_length); }

【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言，原生支持C和C++标准规范，主要由类库和语言扩展层构成，提供多层级API，满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit