news 2026/9/10 18:06:37

CANN/GE ACL算子队列配置API

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
CANN/GE ACL算子队列配置API

aclopSetMaxOpQueueNum

【免费下载链接】geGE(Graph Engine)是面向昇腾的图编译器和执行器,提供了计算图优化、多流并行、内存复用和模型下沉等技术手段,加速模型执行效率,减少模型内存占用。 GE 提供对 PyTorch、TensorFlow 前端的友好接入能力,并同时支持 onnx、pb 等主流模型格式的解析与编译。项目地址: https://gitcode.com/cann/ge

产品支持情况

  • Ascend 950PR/Ascend 950DT:不支持
  • Atlas A3 训练系列产品/Atlas A3 推理系列产品:支持
  • Atlas A2 训练系列产品/Atlas A2 推理系列产品:支持
  • Atlas 200I/500 A2 推理产品:支持
  • Atlas 推理系列产品:支持
  • Atlas 训练系列产品:支持
  • IPV350:不支持

功能说明

通过单算子模型方式执行单个算子时,配置算子缓存信息老化,以达到节约内存和平衡调用性能的目的。

函数原型

aclError aclopSetMaxOpQueueNum(uint64_t maxOpNum)

参数说明

参数名输入/输出说明
maxOpNum输入“算子类型-单算子模型”映射队列的最大长度。
如果长度达到最大,则会先删除长期未使用的映射信息以及缓存中的单算子模型,再加载最新的映射信息以及对应的单算子模型。
通过单算子模型方式执行单个算子时(aclopUpdateParams接口执行单算子除外),如果不调用本接口配置映射队列的最大长度,则默认最大长度为20000。
aclopUpdateParams接口执行单算子时,如果不调用本接口配置映射队列的最大长度,则表示无需老化算子缓存信息。

返回值说明

返回0表示成功,返回其他值表示失败,请参见aclError。

【免费下载链接】geGE(Graph Engine)是面向昇腾的图编译器和执行器,提供了计算图优化、多流并行、内存复用和模型下沉等技术手段,加速模型执行效率,减少模型内存占用。 GE 提供对 PyTorch、TensorFlow 前端的友好接入能力,并同时支持 onnx、pb 等主流模型格式的解析与编译。项目地址: https://gitcode.com/cann/ge

创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/9/10 18:06:07

CANN/GE逻辑流分配信息

LogicalStreamAllocationInfo构造函数和析构函数 【免费下载链接】ge GE(Graph Engine)是面向昇腾的图编译器和执行器,提供了计算图优化、多流并行、内存复用和模型下沉等技术手段,加速模型执行效率,减少模型内存占用。…

作者头像 李华
网站建设 2026/9/10 18:03:24

STM32F407实战:DS18B20测温与OLED报警系统设计

简介:基于STM32F407的温度传感器报警系统工程,核心器件采用DS18B20数字温度传感器,配合4针0.96寸OLED显示屏,实现环境温度实时显示、日期时间显示以及超限声光报警。代码在STM32F4系列标准外设库环境下编写,对F4系列芯…

作者头像 李华
网站建设 2026/9/10 18:03:10

CANN/ge GetSize外置权重大小API

GetSize 【免费下载链接】ge GE(Graph Engine)是面向昇腾的图编译器和执行器,提供了计算图优化、多流并行、内存复用和模型下沉等技术手段,加速模型执行效率,减少模型内存占用。 GE 提供对 PyTorch、TensorFlow 前端的…

作者头像 李华
网站建设 2026/9/10 18:00:22

L8058与L8168校色文件不可混用的底层原理

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

作者头像 李华
网站建设 2026/9/10 17:58:31

二叉树中序遍历全解析:递归、迭代与Morris遍历的实战指南

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

作者头像 李华