分享好友 最新动态首页 最新动态分类 切换频道
转载:【AI系统】死代码消除
2024-12-27 10:59

死代码消除(Dead Code Elimination)是一种编译器优化技术,旨在删除程序中不会被执行的代码,从而提高程序的执行效率和资源利用率。死代码是指在程序的当前执行路径下不会被访问或执行的代码片段。

转载:【AI系统】死代码消除

死代码消除的目的是删除程序中无用和不可达操作对应的代码。在传统编译器中,死代码消除通常是通过分析控制流图(CFG),从而找到并删除无用和不可达操作对应的代码。

不可达操作通常有两类:

第一种是不可达基本块中的操作。在控制流图中,对于某个基本块 ,如果从入口基本块 存在一条路径能够到达 基本块 ,则 是可达基本块,反之则为不可达基本块。当一个操作位于不可达基本块块中,根据不可达基本块的定义,该操作将不可能被执行到,所以该操作为不可达操作。

第二种是由条件分支优化导致的舍弃基本块中的操作。在控制流图中,当某个基本块 进行条件转移时,如果其条件在编译阶段是可以直接被计算出来的话,那么编译器在编译阶段就可以很清楚条件转移将会前往那个分支。相比于执行的分支,另一个分支将不会被编译器所执行,这个分支所对应的所有操作都是不可达操作。

如上面的控制流图所示,其中 是一个不可达的基本块,因为不存在一条路径从 到达 ,所以 中的所有操作都是不可达操作。对于基本块 以及其两个条件转移目的基本块 和 ,假设 的条件转移条件始终为 true 且 为 true 所对应的条件转移目的基本块,在这种情况下, 将不会被执行到, 中所对应的操作为不可达操作。

以下是一个简单的不可达操作删除的例子:


上面是用 python 实现的一段代码。在该程序中,test 函数的输入始终为 False,所以在 test 函数内部, 这条语句将永远不会被执行到,所以这条语句为不可达操作。编译会将上述代码优化为:


在 test 函数中,当 test 进行 return 后任有一个打印操作 ,由于该操作位于 return 后,永远不会被执行到,编译器会将上述代码进一步优化成:


在传统编译器中,第一种不可达操作的删除通常是通过深度优先搜索遍历基本块集合。从入口基本块 开始,遍历基本块集合,找到所有的可达基本块并打上标记,之后再遍历一次基本块集合,找到所有的不可达基本块,然后删除不可达基本块到可达基本块的边。第二种不可达操作的删除,通常在编译阶段,对于已确定条件的条件转移,编译器会进行特殊标记,在死代码消除阶段,编译器根据标记删除掉不流动的那条边,这样该分支对应的基本块就从可达基本块变成不可达基本块,之后通过不可达基本块的删除即可。

无用操作是指其结果没有外部可见效应,比如冗余的变量赋值操作,该变量在定义后没有在后续的操作中使用到,不会对后续操作产生任何影响,所以可以直接删除该变量赋值操作。在传统编译器中,编译器如何判断一个操作是否是无用操作呢?

在传统编译器中,有一些操作可以被认为是一定有用的,一些书中将这种操作称为关键操作。而参与关键操作计算的或者控制流程图流向关键操作所在基本块的条件转移或跳转操作也可以认为是有用的,编译器可以通过。

以下是一个简单的删除无用操作的例子:


上面是用 python 实现的一段代码。在 test 函数中,因为最后的结果需要返回变量 y,此时变量 y 对于 test 函数来说是有用的,而 y 又需要通过 x 计算得到,所以变量 x 对于 test 函数来说也是有用的。简单修改一下代码:


上面是用 python 实现的一段代码。在 test 函数中,返回值从变量 y 变成了 a+b+c,此时变量 y 和 x 并不会影响到 test 函数的功能,所以变量 y 和 x 都是无用的代码。

从上面可以看出,函数的 return 操作是关键操作中的一种。关键操作的特点是它们的执行结果或副作用会直接或间接地影响程序的状态、数据流或与外部环境的交互。下面给出几种的关键操作:

  • 操作与过程的返回结果有关:这包括对引用调用参数进行修改、对全局变量进行赋值、通过具有歧义的指针进行赋值、作为返回值通过 return 语句返回等。这些操作的结果可能会影响到调用该过程的代码或其他代码对应的内存值。

  • 输入输出语句:输入输出语句是指与程序的输入和输出相关的操作,例如读取用户输入、打印输出到控制台或文件等。这些操作可以影响程序的交互性和与外部环境的通信。

  • 可以影响当前过程外可访问的内存值:这包括对共享内存区域进行读写、对全局变量进行修改等操作。这些操作可能会影响到其他代码对应的内存值,从而引起并发问题或数据不一致性。

在确定关键操作后,编译器就可以通过关键操作找到所有的有用操作,这里的有用操作分为两类:

  • 第一类是关键操作操作数所对应的操作,这类操作的结果通常是参与了关键操作的计算,所以这类操作是有用的。

  • 第二类是引导控制流流向关键操作所在基本块所对应的条件转移操作。

在了解传统编译器中通常是如何进行无用代码消除之前,首先需要了解后支配性和控制依赖性。

后支配性:在控制流图中,对于基本块 和 ,如果所有非空路径从 到出口基本块都经过 ,则称 后支配 。其计算公式为

其中 RDOM(n) 表示 基本块 所对应的后支配节点,succ(n)表示 基本块 的所有后继节点。在此处并不考虑支配性的严格性,所以 RDOM(n) 中包含自身。而对于后继节点的后支配节点,由后支配性的定义,需要所有路径同时经过的基本块,所以这里取所有后继节点的后支配节点的交集。

如上图,其中 的后支配节点为 {,,,}, 的后支配节点为 {,,,},其余节点的后支配节点读者可以自行探索。

控制依赖性:在控制流图中,对于基本块 和 ,如果存在一条或多条非空路径从 到 出口基本块,且路径经过 。同时也存在一条或多条非空路径从 到 出口基本块,且路径不经过 ,直观上看, 能否执行取决于 的条件转移, 在控制上依赖 ,称 是 的控制依赖点。

如上图, 和 的控制依赖点为 ,以 为例,从 到出口节点 ,存在非空路径经过 ,又存在非空路径不经过 ,所以 的控制依赖点为 , 同理。

在传统编译器中,对于某个关键操作 i ,假设 i:v = x op y,如果操作 x 和 y 的定义没有被标记上有用,则将其标记为有用操作。然后遍历关机操作 d 所在块的控制依赖块,将控制依赖块的条件转移操作标记为有用。在标记操作完成后,需要将无用的条件转移操作转化为跳转操作,跳转到该基本块的第一个含有用操作的后支配节点。因为当一个基本块的条件转移操作没有被标记为有用,那么从其后继结点一直到其直接的后向支配者结点,都不包含有用操作。如果其直接后继节点不包含有用的操作,也是同样。由于出口节点是一定含有有用操作,所以上述操作在向后查找的过程中,一定会停止。

AI 编译器通常是通过分析计算图,找到无用的计算节点或不可达的计算节点,然后消除这些节点。

在计算图中,不可达节点是指从输入节点通过图中的有向边无法到达的节点。如下图,计算图中有 A,B,C 三个算子,假设三个算子都不是输入节点。不存在一条路径从输入节点到 B 节点,所以 B 节点是不可达节点,AI 编译器会删除该节点,并删除其到可达节点的边,即边 。

在计算图中,无用节点是指某个计算节点的结果或副作用不会对输出节点产生影响。如下图,计算图中有 A,B,C 三个算子,B 节点输出没有后继节点,不会对后续的计算图流程产生影响,所以 B 节点是无用节点,AI 编译器会将该节点删除。

除此之外,训练的时候会产生大量的子图,而这些子图通常对于推理来说是无用的,所以在推理的时候可以删除这些无用的子图。

以 Golang 为例,简单了解一下AI编译器是死代码消除的一种实现。

  1. 通过控制流分析,找到可达的基本块(ReachableBlocks 函数)。编译器通过深度优先搜索,从入口基本块开始遍历控制流图。将遍历到的所有基本块都标记为可达。
  2. 从不可达的基本块中删除出边。遍历控制流图中的所有基本块,如果某个基本块 未被标记为可达,则遍历 的所有后继节点,如果后继节点是可达的,则删除 到该节点的边。
  3. 从可达的基本块中删除无效的出边。如果某个基本块 的条件转移操作的条件已经确定,Golang 在 lower pass 优化阶段会将此条件操作进行标记,并确定需要前往的后继节点,而其他后继节点将不会被执行到,所以需要删除 到这些节点的边。
  4. 找到有用操作,并删除无用操作。根据关键操作找到所有有用的操作,然后将无用的操作删除。在 Golang 中,每一步操作都会用一个 Value 对象来表示操作得到的结果。所以 Value 对象可以代表一个操作,将无用的操作所对应的 Value 对象值设置为空值,然后遍历所有基本块,将基本块中值为空的所有 Value 对象删除,从而达到删除无用操作的目的。
  5. 删除不可达操作。不可达操作对应的基本块是第二步和第三步产生的,在经历过第四步之后,这些基本块一个 Value 对象都没有,即空块。编译器通过遍历所有的基本块,找到空块并删除,从而达到删除不可达操作的目的。

如果您想了解更多AI知识,与AI专业人士交流,请立即访问昇腾社区官方网站https://www.hiascend.com/或者深入研读《AI系统:原理与架构》一书,这里汇聚了海量的AI学习资源和实践课程,为您的AI技术成长提供强劲动力。不仅如此,您还有机会投身于全国昇腾AI创新大赛和昇腾AI开发者创享日等盛事,发现AI世界的无限奥秘~

最新文章
如何触发亚马逊店铺二审?实用技巧与方法全解析!
最近,亚马逊店铺的二审问题似乎稍有缓和,但依然是许多卖家心中的一块“绊脚石”。尽管情况有所改善,二审依旧令不少亚马逊卖家感到困惑和焦虑。在此背景下,XX互联的注册部门自6月初便开始积极探索应对二审的策略,然而直至今日,依然未
百度地图北斗导航最新版
百度地图北斗导航最新版本app支持在这浏览到很多的导航信息,全部的城市位置都可以帮你定位到,城市布局也是很清晰的,最全的道路给你来切换,不同的模式给你来切换,多样化供你切换。1、应用程序结合了AR技术和GPS定位技术,导航也是带你
白茶一斤售价如何才能不亏本
其次,合理安排生产计划也是提高生产效率的重要手段。根据市场需求量进行合理预测,并制定相应的采摘和加工计划,避免资源浪费和库存积压。供应链管理对于降低成本、提升竞争力至关重要。建立稳定可靠的供应链网络能够确保原材料及时到达并
SEO介绍质量,详细分析关键词布局的艺术
在当今互联网时代,搜索引擎优化(SEO)已经成为企业提升网站排名、增加流量、提高品牌知名度的重要手段。SEO的核心在于对网站内容的优化,而的则是优化过程中的关键环节。本文将从关键词布局的角度,探讨如何进行SEO评估,以提升网站质量
刀疤王是如何捕获远古泰坦雪魔的? #哥斯拉大战金刚2 #哥斯拉 #金刚 #科幻电影
{{if !data.isVip && data.isActText}}{{else if !data.isVip && !data.isActText}}{{else}}{{if !data.isNormalVip}}{{if data.expiredVip && data.isActText}}{{else if data.expiredVip && !data.isActText}}{{else}}{{/if}}{{else if d
游戏APP广告变现零撸介绍开发软件
游戏APP广告变现零撸介绍一、引言随着移动互联网的蓬勃发展,游戏APP作为重要的娱乐方式之一,其用户规模持续增长。为了实现盈利和可持续发展,游戏APP广告变现成为了一种重要的商业模式。而“零撸”作为近年来在游戏及广告领域兴起的概念
谷歌SEO中,Canonical标签与301重定向有何区别?
在搜索引擎优化的浩瀚宇宙中,Canonical标签与301重定向如同两颗璀璨的星辰,各自在引导搜索引擎爬虫、维护网站权威性和提升用户体验方面发挥着不可或缺的作用。作为一名在SEO领域摸爬滚打多年的实践者,我深知这两者虽目标相似,但实现方
百度手机网站关键词排名,如何快速提升并稳定排名?
在这个信息爆炸的时代,手机网站已成为我们获取信息、享受服务的重要渠道。而作为一名深耕互联网领域的实践者,我深知百度手机网站关键词排名对于网站流量、用户粘性乃至商业价值的决定性影响。通过我多年的实战经验,我发现,掌握一套有效
跨境电商平台和独立站有什么区别?
做跨境电商有两种形式,一是独立站,一是平台。那么独立站和平台有什么不一样?区别有哪些呢?定位区别首先定义上,独立站是拥有独立域名,自主、自由宣传推广媒体与渠道的新型网站;跨境电商平台则是跨境企业或个人进行网上交易洽谈的平台
[教育行业新趋势]在职教育学硕士研究生热度直线上升
随着职场竞争的加剧,越来越多的在职人员开始选择提升学历与专业技能,特别是在教育行业。在职教育学硕士研究生项目作为一种灵活的教育选择,吸引了众多想要提升自我、转换职业方向或加深教育领域知识的职场人士。近年来,这类项目的热度持
相关文章
推荐文章
发表评论
0评