L1ToGM连续数据搬运DataCopy【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言原生支持C和C标准规范主要由类库和语言扩展层构成提供多层级API满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit产品支持情况Ascend 950PR/Ascend 950DT不支持Atlas A3 训练系列产品/Atlas A3 推理系列产品支持Atlas A2 训练系列产品/Atlas A2 推理系列产品支持Atlas 200I/500 A2 推理产品不支持Atlas 推理系列产品AI Core不支持Atlas 推理系列产品Vector Core不支持Atlas 训练系列产品不支持Kirin X90支持Kirin 9030支持功能说明头文件路径为basic_api/kernel_operator_data_copy_intf.h。该接口能够将矩阵从L1 Buffer连续搬运至Global Memory数据搬运时格式和内容保持不变。函数原型template typename T __aicore__ inline void DataCopy(const GlobalTensorT dst, const LocalTensorT src, const uint32_t count)参数说明表1模板参数说明参数名描述T源操作数或者目的操作数的数据类型。支持的数据类型请参考数据类型。表2参数说明参数名称输入/输出含义dst输出目的操作数类型为GlobalTensor存储位置为Global Memory地址需要1字节对齐。src输入源操作数类型为LocalTensor存储位置为L1 Buffer地址需要32字节对齐。count输入参与搬运的元素个数。注count * sizeof(T)需要32字节对齐若未对齐搬运量会向下取整到32字节对齐。以half数据类型为例源操作数的shape为1 * 128。当count 128时图1将源操作数中128个元素连续搬运至目的操作数。图1连续搬运示意图数据类型源矩阵和目的矩阵支持的数据类型保持一致。针对Atlas A3 训练系列产品/Atlas A3 推理系列产品支持数据类型为int8_t、uint8_t、int16_t、uint16_t、half、bfloat16_t、int32_t、uint32_t、float、int64_t、uint64_t、double。Atlas A2 训练系列产品/Atlas A2 推理系列产品支持数据类型为int8_t、uint8_t、int16_t、uint16_t、half、bfloat16_t、int32_t、uint32_t、float、int64_t、uint64_t、double。针对Kirin X90支持数据类型为int8_t、uint8_t、int16_t、uint16_t、half、int32_t、uint32_t、float、int64_t、uint64_t、double。Kirin 9030支持数据类型为int8_t、uint8_t、int16_t、uint16_t、half、int32_t、uint32_t、float、int64_t、uint64_t、double。返回值说明无约束说明位于L1 Buffer的源地址必须32字节对齐位于Global Memory的目的地址必须1字节对齐。调用连续搬运接口时count * sizeof(T)需要32字节对齐若未对齐则搬运量会向下取整到32字节对齐。针对如下产品型号Atlas A3 训练系列产品/Atlas A3 推理系列产品Atlas A2 训练系列产品/Atlas A2 推理系列产品在跨卡通信算子开发场景DataCopy类接口支持跨卡数据搬运仅支持HCCS物理链路不支持其他通路开发者开发过程中需要关注涉及卡间通信的物理通路可通过npu-smi info -t topo命令查询HCCS物理链路。调用示例L1到GM连续数据搬运的样例请参考L1到GM搬运样例。【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言原生支持C和C标准规范主要由类库和语言扩展层构成提供多层级API满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考