当前位置: 首页 > news >正文

CANN/asc-devkit:Trunc接口临时缓冲区因子大小获取

GetTruncTmpBufferFactorSize

【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言,原生支持C和C++标准规范,主要由类库和语言扩展层构成,提供多层级API,满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit

功能说明

该接口用于获取maxLiveNodeCount和extraBuf,在固定空间大小的情况下,通过maxLiveNodeCount和extraBuf可以推算算子单次最大计算元素数量。maxLiveNodeCount表示临时空间是单次计算数据量所占空间的多少倍;extraBuf表示使用的额外临时空间大小。

推算示例如下:

  • 算子实现需要调用Trunc接口,开发者为其预留currBuff大小的空间,利用GetTruncTmpBufferFactorSize接口得到maxLiveNodeCount、extraBuf输出值,可推导算子单次最大计算元素数量为:

    currentShapeSize = (currBuff - extraBuf) / maxLiveNodeCount / typeSize

  • 算子实现需要调用两个kernel侧API KernelIntf1、KernelIntf2,利用两个GetXxxTmpBufferFactorSize(其中Xxx为需要调用的两个高阶API)接口的两组输出值(maxLiveNodeCount、extraBuf)以及当前现有的临时空间,推导单次最大计算元素数量currentShapeSize为:

    currentShapeSize1 = (currBuff - extraBuf1) / maxLiveNodeCount1 / typeSize

    currentShapeSize2 = (currBuff - extraBuf2) / maxLiveNodeCount2 / typeSize

    currentShapeSize = min(currentShapeSize1, currentShapeSize2)

注意上文中的currBuff表示接口计算可用的空间,需要去除用户输入输出等空间;另外,接口获取的maxLiveNodeCount值可能为0,计算时需要判断该值非0,避免除零错误。

函数原型

void GetTruncTmpBufferFactorSize(const uint32_t typeSize, uint32_t& maxLiveNodeCount, uint32_t& extraBuf)

参数说明

表1参数列表

参数名输入/输出功能
typeSize输入输入的数据类型大小,单位为字节。比如输入的数据类型为half,此处应传入2。
maxLiveNodeCount输出最大存活节点数,表示临时空间是单次计算数据量所占空间的多少倍。
extraBuf输出使用的额外临时空间大小,单位为字节。

返回值说明

约束说明

当利用maxLiveNodeCount,extraBuf反推出的currentShapeSize * typeSize < 256B时,currentShapeSize按照256B/typeSize的值向上取整。

调用示例

完整的调用样例请参考更多样例。

uint32_t maxLiveNodeCount = 0; uint32_t extraBuf = 0; AscendC::GetTruncTmpBufferFactorSize(typeSize, maxLiveNodeCount, extraBuf);

【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言,原生支持C和C++标准规范,主要由类库和语言扩展层构成,提供多层级API,满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit

创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考

http://www.jsqmd.com/news/1205480/

相关文章:

  • Linux虚拟机环境搭建与优化实战指南
  • cann/asc-devkit:SoftmaxGrad Tiling接口
  • CANN/asc-devkit:__cvta_local_to_generic地址空间转换函数
  • 2026年7月Top10推荐:CPPM与SCMP通过率测评,哪个好? - 众智商学院cppm官方
  • 2026柳州市家里卫生间漏水、阳台漏水、楼顶漏水、阳台漏水、地下室渗水、阳光房漏水哪家防水公司做的好!核心靠谱公司推荐(售后无忧,线上质保) - 防水百科
  • Linux x86 Shellcode 编写实战:从汇编基础到 execve 实现与优化
  • 3分钟掌握网易云音乐NCM格式转换:本地音乐解密工具完全指南
  • CANN Ascend C SIMT协作组shfl_up函数
  • CANN/asc-devkit SetBatchInfoForNormal函数
  • CANN/asc-devkit原子递增操作
  • PVZ3E冷沙拉植物测评:范围减速与控场技巧详解
  • FPGA周期测频法原理与实现详解
  • 二手爱马仕变现 24 小时估价,中检资质商家私密交易 - 生活时报
  • CANN/asc-devkit SoftmaxFlashV3 Tiling接口
  • Python图像识别自动化:nanoclaw-py实现桌面GUI精准操作
  • cann/asc-devkit SIMT lanemask_ge函数
  • 北京万国卡地亚去哪变现?2026年7月高价回收正装、潜水腕表攻略 - 生活时报
  • 2026菏泽瓷砖空鼓松动异响修复:本地口碑好的7家正规靠谱团队推荐:卫生间、客厅、阳台、走廊瓷砖空鼓修复(快速修复,售后无忧) - 房屋修缮
  • FPGA开发入门:PGX-Nano静态数码管驱动实践
  • JetBrains MCP协议:IDE从编辑器到可编程开发中心的范式革命
  • 如何在5分钟内掌握手机号码定位:location-to-phone-number开源工具完整指南
  • 计算机毕业设计之基于springboot的在线考试系统设计与实现
  • 51单片机ADC0832电压表设计:从信号调理到稳定显示的完整指南
  • 你的数字花园需要一扇通往世界的门:Obsidian Webpage HTML Export插件深度解析
  • 北京闲置高奢珠宝变现全程透明,24 小时上门无套路当场打款 - 生活时报
  • 51单片机温控风扇开发:从PWM调速到红外遥控的工程实践
  • 如何快速解密网易云音乐NCM格式:ncmdump终极指南
  • tp-libvirt社区贡献指南:如何参与开源虚拟化测试项目
  • CANN/asc-devkit原子交换操作API
  • 2026荆州卫生间防水、外墙、地下室、楼顶渗漏、阳光房防水 选对服务商,售后无忧,告别房屋渗漏(一次维修,售后无忧) - 企业资讯