news 2026/5/9 22:22:37

CANN/pto-isa事件与同步机制

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
CANN/pto-isa事件与同步机制

事件与同步

【免费下载链接】pto-isaParallel Tile Operation (PTO) is a virtual instruction set architecture designed by Ascend CANN, focusing on tile-level operations. This repository offers high-performance, cross-platform tile operations across Ascend platforms.项目地址: https://gitcode.com/cann/pto-isa

PTO Tile Lib 支持显式事件(event)模型,用于表达操作之间的依赖关系,而不必为每条指令都引入全局屏障。

本文档描述include/pto/common/pto_instr.hppinclude/pto/common/event.hpp中使用的 C++ 事件类型。

注意:具体的pto::Event<SrcOp, DstOp>类型仅在设备构建(__CCE_AICORE__)中定义。CPU 仿真后端通常将TSYNC视为 no-op,并依赖单线程的普通程序顺序来验证语义。

关键类型

pto::Op

pto::Op是类似 opcode 的枚举,用于对操作分类。每个Op映射到一个硬件流水线(PIPE_VPIPE_MTE2等)。

pto::RecordEvent

许多内建接口(例如TADDTLOADTSTORE)会返回pto::RecordEvent。它是一个标记值,可赋给Event<SrcOp, DstOp>,用于在该 op 结束后记录一个 token。

pto::Event<SrcOp, DstOp>(仅设备)

在设备构建(__CCE_AICORE__)中,include/pto/common/event.hpp定义:

template <Op SrcOp, Op DstOp> struct Event { void Wait(); void Record(); Event& operator=(RecordEvent); };
  • Wait():阻塞直到 producer 侧 token 满足。
  • Record():在 producer 流水线上设置 token。
  • evt = OP(...):从RecordEvent赋值会自动记录 token。

模板参数编码 producer/consumer 的 opcode,用于选择正确的流水线对。

TSYNC<OpCode>()(单流水线屏障)

TSYNC<OpCode>()是单 op 的屏障形式,由TSYNC_IMPL<OpCode>()实现:

  • 在设备上,当前实现将单 op 形式限制在向量流水线 op(PIPE_V)上。
  • 在 CPU 仿真后端(__CPU_SIM)中,TSYNC_IMPL为 no-op。

内建接口中的WaitEvents&...机制

include/pto/common/pto_instr.hpp中多数内建接口在参数末尾带有WaitEvents&... events可变参包,模式为:

  • 内建接口调用TSYNC(events...)
  • TSYNC(events...)调用WaitAllEvents(events...),对每个 event 调用events.Wait()
  • 指令执行后,内建接口返回RecordEvent

这支持一种“SSA 风格”的 C++ 写法:

  1. 将 event token 作为 C++ 变量保存。
  2. 将它们传给下一条 op 以表达顺序约束。
  3. 将 op 返回的RecordEvent赋给 event 变量以记录新 token。

抽象层面的顺序建议

事件主要用于表达流水线类之间的顺序(例如“内存加载完成后向量计算才能消费该 Tile”)。

  • 没有显式数据或事件依赖的操作,在设备上可能乱序执行。
  • 通过事件建立依赖链的操作,必须满足Wait()/Record()所隐含的顺序。

当顺序对正确性有影响时,docs/isa/指令页会说明相关约束(中文参考页参见docs/isa/README_zh.md)。

最小示例

#include <pto/pto-inst.hpp> using namespace pto; void pipeline(__gm__ float* in0, __gm__ float* in1, __gm__ float* out) { using TileT = Tile<TileType::Vec, float, 16, 16>; using GShape = Shape<1, 1, 1, 16, 16>; using GStride = BaseShape2D<float, 16, 16, Layout::ND>; using GT = GlobalTensor<float, GShape, GStride, Layout::ND>; GT gin0(in0), gin1(in1), gout(out); TileT a, b, c; Event<Op::TLOAD, Op::TADD> e0; Event<Op::TLOAD, Op::TADD> e1; Event<Op::TADD, Op::TSTORE_VEC> e2; e0 = TLOAD(a, gin0); e1 = TLOAD(b, gin1); e2 = TADD(c, a, b, e0, e1); TSTORE(gout, c, e2); }

【免费下载链接】pto-isaParallel Tile Operation (PTO) is a virtual instruction set architecture designed by Ascend CANN, focusing on tile-level operations. This repository offers high-performance, cross-platform tile operations across Ascend platforms.项目地址: https://gitcode.com/cann/pto-isa

创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/5/9 22:16:52

CANN/GE图引擎API-添加数据边

AddDataEdge 【免费下载链接】ge GE&#xff08;Graph Engine&#xff09;是面向昇腾的图编译器和执行器&#xff0c;提供了计算图优化、多流并行、内存复用和模型下沉等技术手段&#xff0c;加速模型执行效率&#xff0c;减少模型内存占用。 GE 提供对 PyTorch、TensorFlow 前…

作者头像 李华
网站建设 2026/5/9 22:13:31

NLP技术量化组织民主氛围:从文本数据到决策过程分析

1. 项目概述&#xff1a;当数据科学遇见组织治理 最近几年&#xff0c;我参与了一个挺有意思的交叉领域项目&#xff0c;核心是探讨如何用机器学习&#xff0c;特别是自然语言处理技术&#xff0c;来量化和分析一个大型组织内部的民主氛围与决策过程。这听起来可能有点抽象&…

作者头像 李华
网站建设 2026/5/9 22:03:36

Hermes Agent对接Taotoken自定义提供商配置详解

&#x1f680; 告别海外账号与网络限制&#xff01;稳定直连全球优质大模型&#xff0c;限时半价接入中。 &#x1f449; 点击领取海量免费额度 Hermes Agent对接Taotoken自定义提供商配置详解 1. 准备工作 在开始配置之前&#xff0c;你需要准备好两样东西&#xff1a;一个有…

作者头像 李华
网站建设 2026/5/9 22:01:10

手把手教你为蜂鸟E203添加自定义累加指令:NICE协处理器实战指南

蜂鸟E203实战&#xff1a;用NICE协处理器实现自定义累加指令全流程解析 在RISC-V生态中&#xff0c;蜂鸟E203以其精简高效的特性成为嵌入式开发的明星处理器。当标准指令集无法满足特定计算需求时&#xff0c;NICE协处理器接口为我们打开了一扇定制化的大门。本文将带你完整实…

作者头像 李华