当前位置: 首页 > news >正文

昇腾CANN asc-devkit SIMD-API量化操作

GetDequantizeMaxMinTmpSize

【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言,原生支持C和C++标准规范,主要由类库和语言扩展层构成,提供多层级API,满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit

功能说明

kernel侧Dequantize接口的计算需要开发者预留/申请临时空间,本接口用于在host侧获取预留/申请的最大最小临时空间大小,开发者基于此范围选择合适的空间大小作为Tiling参数传递到kernel侧使用。

  • 为保证功能正确,预留/申请的临时空间大小不能小于最小临时空间大小;
  • 在最小临时空间-最大临时空间范围内,随着临时空间增大,kernel侧接口计算性能会有一定程度的优化提升。为了达到更好的性能,开发者可以根据实际的内存使用情况进行空间预留/申请。

函数原型

void GetDequantizeMaxMinTmpSize(const ge::Shape& srcShape, const uint32_t typeSize, uint32_t& maxValue, uint32_t& minValue)

参数说明

表1接口参数列表

参数名输入/输出描述
srcShape输入Dequantize接口的输入srcTensor的shape信息。
typeSize输入Dequantize接口的输入srcTensor的数据类型大小,单位为字节。比如输入的数据类型为int32_t,此处应传入4。
maxValue输出Dequantize接口能完成计算所需的最大临时空间大小,超出该值的空间不会被该接口使用。在最小临时空间-最大临时空间范围内,随着临时空间增大,kernel侧接口计算性能会有一定程度的优化提升。为了达到更好的性能,开发者可以根据实际的内存使用情况进行空间预留/申请。最大空间大小为0表示计算不需要临时空间。
maxValue仅作为参考值,有可能大于Unified Buffer剩余空间的大小,该场景下,开发者需要根据Unified Buffer剩余空间的大小来选取合适的临时空间大小。
minValue输出Dequantize接口能完成计算所需最小临时空间大小。为保证功能正确,接口计算时预留/申请的临时空间不能小于该数值。最小空间大小为0表示计算不需要临时空间。

返回值说明

约束说明

调用示例

// 输入shape信息为(2,1024) // Dequantize接口中传入的DequantizeParams中m = 2, n = 1024;算子输入的数据类型为int32_t std::vector<int64_t> shapeVec = {2, 1024}; ge::Shape srcShape(shapeVec); uint32_t typeSize = 4; uint32_t maxValue = 0; uint32_t minValue = 0; AscendC::GetDequantizeMaxMinTmpSize(srcShape, typeSize, maxValue, minValue);

【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言,原生支持C和C++标准规范,主要由类库和语言扩展层构成,提供多层级API,满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit

创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考

http://www.jsqmd.com/news/1207749/

相关文章:

  • Cursor支付Webhook重试机制失效真相:Nginx超时配置、云函数冷启动、幂等键设计三重陷阱(生产环境崩溃前最后24小时复盘)
  • Oracle 数据库灾难恢复方案:为数据穿上终极防弹衣
  • TradingAgents-CN多智能体股票分析框架:3步打造你的AI投资智囊团
  • 小程序计算机毕设之宠物服务预约审批系统的设计与实现 基于 SpringBoot + 微信小程序的宠物用品售卖与服务小程序(完整前后端代码+说明文档+LW,调试定制等)
  • 魔兽争霸3终极优化指南:5分钟解决画面拉伸与卡顿问题
  • UEFI安全启动导致U盘安装系统失败的解决方案
  • Meta因默认使用公开照片生成图像遭反对 撤回Muse Image功能
  • AI化学逆合成规划终极指南:3步让复杂分子合成变简单
  • 2026杭州减温减压器厂家怎么选?资质售后选型实用指南 - 信息热点
  • 物流费涨了,利润没了:供应链成本分析必须看这10个指标
  • 龙虾企业AI智能体平台哪家好?2026 七款分场景AI智能体选型测评参考
  • 三步搞定官方教材下载:国家中小学智慧教育平台电子课本下载器终极指南
  • 3步打造你的专属文献管理界面:Zotero Style插件完全指南
  • LibVMI实战案例:检测虚拟机逃逸攻击的技术实现
  • Symfony CMF 路由系统详解:动态 URL 管理与 SEO 优化技巧
  • SteamShutdown:基于Steam文件监控的自动关机完整解决方案
  • 2026重庆5天4晚深度定制游怎么安排?TOP3持证导游、主城武隆路线与费用说明 - 随峰国旅
  • 2026郫都区黄金回收市场深度调研:四大渠道对比与三大靠谱品牌实测 - 得天独厚
  • K4A8G085WC-BCTD在嵌入式系统与消费电子中的DDR4应用解析
  • 如何3步配置鸣潮模组:WuWa-Mod终极游戏增强指南
  • 高效突破:如何在VSCode中实现专业级ARM Cortex嵌入式调试体验
  • LinkVLA:可微分因果链驱动的视觉-语言-动作对齐
  • 如何快速获取智慧教育平台电子课本?tchMaterial-parser终极指南
  • 15分钟掌握Dify高德地图集成:零代码构建智能位置服务
  • 终极Mac光标自定义指南:3分钟让你的桌面与众不同
  • 如何通过Privado开源数据安全扫描工具实现企业级隐私合规自动化
  • 石家庄台球器材怎么选?添翼台球器材品质服务双优势解析 - 百航
  • InvenTree开源库存管理系统:告别Excel表格,5步打造专业物料管理体系
  • 为什么Nemotron-3-Embed-8B-BF16在RTEB排行榜上领先?性能对比分析
  • 如何在5分钟内掌握GetStoreApp:Windows应用离线下载的终极解决方案