首页 > 编程语言 >C++代码与AST compiler

C++代码与AST compiler

时间:2023-01-17 04:33:06浏览次数:45  
标签:AST Derived C++ 语法 编译器 Base clang compiler

C++代码与AST compiler

Compiler3_语法制导翻译&AST

语法制导翻译(Syntax Directed Translation)的任务

解析输入的字符串时,在特定位置执行指定的动作。

基本思想

 

 

 抽象语法树

分析树与抽象语法树

 

 

 分析树:

  • 编码了句子的推导过程
  • 但是包含很多不必要的信息,节点占用存储空间
  • 需要知道那些信息是重要的
    • 对于表达式而言,只需要知道运算符和运算数
      • 优先级,结合性等已经在语法分析部分处理掉了
    • 对于语句,函数等其他构造而言也一样
      • 比如,编译器不关心赋值符号是=还是:=

具体语法和抽象语法

  • 具体语法是语法分析器使用的语法
  • 抽象语法是用来表达语法结构的内部表示
  • 早期的编译器有的不采用抽象语法树数据结构
  • 现代编译器一般都采用抽象语法树作为语法分析器的输出
    • 必须适合于语法分析,如各种分隔符,消除左递归,提取公因子等
    • 现代编译器一般采用抽象语法作为前端(词法/语法分析器)和后端(代码生成)的接口
    • 直接在语法制导翻译中生成代码
    • 更好的系统的支持
    • 简化编译器的设计

抽象语法树的自动生成

  • 在语法动作中,加入生成语法树的代码片段
    • 片段一般是语法树的构造函数
  • 在产生式规约的时候,会自底向上构造整棵数
    • 从叶子到根

 

  • 抽象语法树是编译器前端和后端的接口
    • 程序一旦被转换成抽象语法树,则源代码即被丢弃
    • 后续阶段只处理抽象语法树
  • 所以抽象语法树必须编码足够多的源代码信息
    • 例如,语法结构所在位置(文件、行号、列号等)

觉得自动生成方面LL比LR好,自顶向下更符合人类认知,代表生成器:antlr

Cppinsights: C++的见解——用编译器的眼睛查看源代码

Contents

  • What
  • Why
  • Building
  • Usage
  • Get Involved
  • Support

What

C++见解是一种基于CLAN的工具,它可以进行源到源转换。它的目标是让事情变得可见,而这些事情通常是故意发生在幕后的。它是关于编译器为我们所做的神奇的事情。

以这段代码为例:

class Base {

};

 

class Derived : public Base {

};

 

int main() {

  Derived d;

  Base& b = d;

}

没什么特别的,当然是编译的。下面是编译器的视图:

class Base {

/* public: inline constexpr Base() noexcept; */

/* public: inline ~Base(); */

/* public: inline constexpr Base(const Base &); */

/* public: inline constexpr Base(Base &&); */

};

 

class Derived : public Base {

/* public: inline constexpr Derived() noexcept; */

/* public: inline constexpr Derived(const Derived &); */

/* public: inline constexpr Derived(Derived &&); */

};

 

int main(){

  Derived d;

  Base& b = static_cast<Base&>(d);

}

您可以看到编译器提供的所有函数。还有从Derived到Base的向下转换。

我并不是说所有的事情都是对的。这只是我认为足够好的见解的初始版本,可以将其交给公众。请记住,这完全是基于clang及其对AST的理解。

Why

C++见解是一种基于CLAN的工具,它可以进行源到源转换。它的目标是让人们看到那些通常是故意发生在幕后的事情。它是关于编译器为我们所做的神奇的事情。或者查看编译器的类。

不久前,我开始研究一些新的东西,我们用C++ 11,C++ 14和C++ 17得到。像lambdas、range-basedfor-loops和结构化绑定之类的惊人功能。我把它放在一个谈话中。你可以在网上找到幻灯片和视频。

然而,所有的研究和我的一些训练和教学让我开始思考,如果我们能用编译器的眼睛看的话。当然,对于clang至少有一个AST-dump。使用编译器编译器这样的工具,我们可以看到编译器从C++源代码段生成的代码。然而,我们看到的是汇编程序。AST和Compiler Explorer输出都不是我编写代码的语言,因此我最熟悉。另外,当教学生C++显示AST并解释它在那里时,对我来说并不十分令人满意。

我开始编写一个clang-based工具,能够将range-basedfor-loop转换为compiler-internal版本。然后,我对结构化绑定和lambdas做了同样的处理。最后,我按照最初的计划做了很多事情。它显示了调用运算符的位置,以及编译器执行强制转换的位置。C++的见解能够推断出auto或decltype后面的类型。目标是生成可编译的代码。然而,并非所有地方都能做到这一点。

不过,还有工作要做。

我并不是说所有的事情都是对的。这只是C++的见解的最初版本,我认为它足够好,可以将它交给公众。此外,请记住,它是完全基于CLAN和我的理解C++和AST。

例如,您可以看到lamda、range-basedfor-loop或auto的转换。当然,您可以转换任何其他C++片段。

看到你自己,C++的见解是在线可获得的:cppinsights.io公司.

Building

C++的洞察力可以在clang-source树或外部构建。

在Windows上构建

See Readme_Windows.md

在Arch Linux上构建

要使用extra/clang生成,请使用以下额外的标志:-DINSIGHTS_USE_SYSTEM_INCLUDES=off -DCLANG_LINK_CLANG_DYLIB=on -DLLVM_LINK_LLVM_DYLIB=on

关于INSIGHTS_USE_SYSTEM_INCLUDES需要关闭的解释,请参见https://github.com/andreasfertig/cppinsights/issues/186。

extra/clang和extra/llvm提供/usr/lib/{libclangAST.so,libLLVM*.a,libLLVM.so}。libclangAST.so需要libLLVM.so,如果libLLVM*.a(而不是libLLVM.so)链接,则会发生冲突。见https://bugs.archlinux.org/task/60512

外面的建筑叮当作响

需要在搜索路径中安装clang。

git clone https://github.com/andreasfertig/cppinsights.git

mkdir build && cd build

cmake -G"Ninja" ../cppinsights

ninja

生成的二进制文件(insights)可以在build-folder中找到。

建筑内部叮当作响

对于在clang-source树中构建它,假设您已经准备好了source-tree:

cd llvm/tools/clang/tools/extra

git clone https://github.com/andreasfertig/cppinsights.git

echo "add_subdirectory(cppinsights)" >> CMakeLists.txt

然后像平常一样发出叮当声。

cmake options

有几个选项可以通过cmake启用:

Option

Description

Default

INSIGHTS_STRIP

构建后剥离细节

ON

INSIGHTS_STATIC

使用静态链接

OFF

INSIGHTS_COVERAGE

启用代码覆盖率

OFF

INSIGHTS_USE_LIBCPP

使用libc++进行测试

OFF

DEBUG

Enable debug

OFF

与Ceevelop一起使用

git clone https://github.com/andreasfertig/cppinsights.git

mkdir build_eclipse

cd build_eclipse

cmake -G"Eclipse CDT4 - Unix Makefiles" ../cppinsights/

然后在cedevelopimport->General->Existing Project into Workspace。选择build_eclipse。享受与Cevelop编辑。

Usage

使用C++的见解相当简单:

insights <YOUR_CPP_FILE> -- -std=c++17

当涉及到系统包括路径时,事情变得复杂起来。二进制中有路径hard-coded,似乎来自编译器C++的见解。来帮助你完成检查脚本/getinclude.py. 它尝试从编译器收集系统包含路径。如果没有使用g++的选项,也可以将另一个编译器作为第一个参数传递。

下面是一个例子:

./scripts/getinclude.py

-isystem/Applications/Xcode.app/Contents/Developer/Toolchains/XcodeDefault.xctoolchain/usr/bin/../include/c++/v1 -isystem/usr/local/include -isystem/Applications/Xcode.app/Contents/Developer/Toolchains/XcodeDefault.xctoolchain/usr/bin/../lib/clang/7.3.0/include -isystem/Applications/Xcode.app/Contents/Developer/Toolchains/XcodeDefault.xctoolchain/usr/include -isystem/usr/include

该脚本可以与C++的见解一起使用:

insights <YOUR_CPP_FILE> -- -std=c++17 `./scripts/getinclude.py`

还有一个GITHUB项目,它设置了一个docker容器,其中包含了最新的C++透视版:C++见解-Docker。

Compatibility

目前,支持clang的最新稳定版本以及当前的开发分支。

ToDo's

See TODO.

Get Involved

  • 通过提交GitHub问题来报告错误/问题。
  • 使用拉取请求提交稿件。

 

参考文献了解

https://www.kirito.info/compiler3-syntax-directed-translation-and-ast/

https://www.5axxw.com/wiki/content/bp9kmi

标签:AST,Derived,C++,语法,编译器,Base,clang,compiler
From: https://www.cnblogs.com/wujianming-110117/p/17056843.html

相关文章

  • C++11 智能指针 shared_ptr
    C++11智能指针shared_ptrWrittenon2023-01-16std::shared_ptr<T>共享智能指针,也被称为计数智能指针。共享智能指针会记录有多少个共享智能指针指向同一个对象,当......
  • C/C++ 顺序表的初始化、添加、插入、删除(删除顺序表中指定的所有元素)
    #include<iostream>#include<stdlib.h>#defineMAX_SIZE100usingnamespacestd;typedefstruct_SqList{int*elems;//顺序表的基地址intsize;//......
  • CF 1779C Least Prefix Sum 题解
    CF链接:LeastPrefixSumLuogu链接:Least PrefixSum${\scr\color{CornflowerBlue}{\text{Solution}}}$先来解释一下题意:给定一个数组,问最少把多少个数变成相反数,......
  • C++11 智能指针
    C++11智能指针Writtenon2023-01-16学习参考资料:C++现代实用教程:智能指针30分钟讲明白现代C++最重要的特性之一:智能指针动态内存管理官方文档栈对象、静态对......
  • C++文学研究助手[2023-01-16]
    C++文学研究助手[2023-01-16]综合实验18文学研究助手一、实验目的(1)熟练掌握串的基本操作及应用。(2)熟练掌握串的匹配操作算法。(3)基于串的存储和操作,实现对英文......
  • GO语言操作Elasticsearch
    Elasticsearch简介Elasticsearch是一个开源的搜索引擎,建立在一个全文搜索引擎库ApacheLucene™基础之上。Lucene可以说是当下最先进、高性能、全功能的搜索引擎库–......
  • 【论文写作分析】之五《融合类别特征扩展与N-gram子词过滤的fastText短文本分类》
    [1]参考论文信息  论文名称:《融合类别特征扩展与N-gram子词过滤的fastText短文本分类》  发布期刊:《小型微型计算机系统》  期刊信息:CSCD扩展  论文写作分析摘要:......
  • elasticsearch 安装与配置
    一、JAVA与elasticsearch的版本对应个人实测能够对应起来的版本:elasticsearch-rtf-2.2.1需要JDK7或更低的版本,推荐使用7elasticsearch-rtf-2.3.3个人测试可以使......
  • 《维我校友,星聚南邕》南宁e中校歌c++版
    #include<cstdio>#include<bits/stdc++.h>#include<time.h>#include<windows.h>#defineqdo262#defineqre294#defineqmi330//q前缀为低音,1后缀为高音,s......
  • python2.7错误:Microsoft Visual C++ 9.0 is required解决办法
     distutils.errors.DistutilsPlatformError:MicrosoftVisualC++9.0isrequired.Getitfromhttp://aka.ms/vcpython27`点开连接404,不提供下载,可取github上下载htt......