__hfmax2【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言原生支持C和C标准规范主要由类库和语言扩展层构成提供多层级API满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit产品支持情况Ascend 950PR/Ascend 950DT支持Atlas A3 训练系列产品/Atlas A3 推理系列产品不支持Atlas A2 训练系列产品/Atlas A2 推理系列产品不支持Atlas 200I/500 A2 推理产品不支持Atlas 推理系列产品AI Core不支持Atlas 推理系列产品Vector Core不支持Atlas 训练系列产品不支持功能说明计算输入bfloat16x2_t类型数据各分量的乘加的结果前两个输入相乘后与第三个输入相加并遵循CAST_RINT模式对结果进行舍入。函数原型bfloat16x2_t __hfmax2(const bfloat16x2_t x, const bfloat16x2_t y, const bfloat16x2_t z)参数说明表1参数说明参数名输入/输出描述x输入源操作数。y输入源操作数。z输入源操作数。返回值说明输入数据各分量乘加的结果。计算的分量a、b、c满足x分量值y分量值z分量值返回值x、y、z任意一个为nannan±inf±0任意值nan±0±inf任意值nanx*y为inf-infnanx*y为-infinfnan±inf任意值0±infinfinf0infinf-inf0-inf约束说明无需要包含的头文件使用该接口需要包含simt_api/asc_bf16.h头文件。#include simt_api/asc_bf16.h调用示例SIMT编程场景// 使用短向量可提升数据搬运效率 __global__ __launch_bounds__(1024) void simt_hfmax2(bfloat16_t* x, bfloat16_t* y, bfloat16_t* z, bfloat16_t* dst, uint32_t input_total_length) { uint32_t idx blockIdx.x * blockDim.x threadIdx.x; // 每个线程处理1个bfloat16x2_t类型的数据即2个bfloat16_t类型的数据因此idx input_total_length / 2的线程不处理数据 if (idx input_total_length / 2) { return; } bfloat16x2_t* input1 (bfloat16x2_t*)x; bfloat16x2_t* input2 (bfloat16x2_t*)y; bfloat16x2_t* input3 (bfloat16x2_t*)z; bfloat16x2_t* out (bfloat16x2_t*)dst; out[idx] __hfmax2(input1[idx], input2[idx], input3[idx]); }SIMD与SIMT混合编程场景// 使用短向量可提升数据搬运效率 __simt_vf__ __launch_bounds__(1024) inline void simt_hfmax2(__gm__ bfloat16x2_t* x, __gm__ bfloat16x2_t* y, __gm__ bfloat16x2_t* z, __gm__ bfloat16x2_t* dst, uint32_t input_total_length) { uint32_t idx blockIdx.x * blockDim.x threadIdx.x; // 每个线程处理1个bfloat16x2_t类型的数据即2个bfloat16_t类型的数据因此idx input_total_length / 2的线程不处理数据 if (idx input_total_length / 2) { return; } dst[idx] __hfmax2(x[idx], y[idx], z[idx]); } __global__ __vector__ void compute_kernel(__gm__ bfloat16_t* x, __gm__ bfloat16_t* y, __gm__ bfloat16_t* z, __gm__ bfloat16_t* dst, uint32_t input_total_length) { asc_vf_callsimt_hfmax2(dim3(1024), (__gm__ bfloat16x2_t*)x, (__gm__ bfloat16x2_t*)y, (__gm__ bfloat16x2_t*)z, (__gm__ bfloat16x2_t*)dst, input_total_length); }【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言原生支持C和C标准规范主要由类库和语言扩展层构成提供多层级API满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考