Python-C语言语法解析：pycparser模块_一ye残雪的博客

Python-C语言语法解析：pycparser模块

0 前言
1 pycparser模块（三方库）
1.1 方法列表
1.2 语法树组成
1.2.1 数据类型定义 Typedef
1.2.1.1 类型声明 TypeDecl
- 1.2.1.1.1 标识符类型 IdentifierType
1.2.2 变量声明 Decl
1.2.2.1 常量 Constant
1.2.3 函数定义 FuncDef
1.2.4 函数声明 FuncDecl
from pycparser import CParser # c语言有错误时，会引出此错误 from pycparser . plyparser import ParseError # c_ast.py 文件下包含了抽象语法树的节点类 from pycparser . c_ast import *
1.1 方法列表

① 使用以下方法从c文件创建parser类：
ast = parse_file(filename, use_cpp = False)
# fake_libc_include文件夹放在处理的c语言目录下
ast = parse_file(filename, use_cpp = True, cpp_path=r'C:\MinGW\bin\gcc.exe', cpp_args=r'-I./fake_libc_include')
parse_file的参数 说明
use_cpp 是否使用本地c语言编译器预处理代码，去掉其中的#命令（头文件、宏定义、pragma）
cpp_path 本地c语言编译器路径
cpp_args fake_libc_include文件夹路径，use_cpp=True时使用，需要从官网下载 
获取c语言文件的抽象语法树ast，如果要处理#include语句，需要下载fake_libc_include文件夹，让编译器预处理常用的方法（添加其到代码的抽象语法树中） 
parser_file() 方法也可以设置use_cpp=False，不用本地的c语言编译器预处理代码，就能输出抽象语法树。 
② 使用以下方法从字符串创建parser类： 
# 读取的文本序列，需去除#include #define这类语句才能生成AST
with open(filename, encoding='utf-8) as f:
	txt = f.read()
ast = CParser().parse(txt)
1.2 语法树组成
 
创建语法树后得到根目录类型 FileAST，FileAST类属性如下： 
self.ext = [Node]（下级节点列表） 
 FileAST下级节点组成的列表，FileAST下级节点只有3种可能： 
 Typedef：typedef数据类型定义
Decl：变量声明
FuncDef：函数声明 
print(ast.ext[0])
if(type(ast.ext[0]) is Decl):
1.2.1 数据类型定义 Typedef
 
Typedef 节点以typedef语句的定义对象 uint8为中心 
typedef int uint8;
Typedef.name = 'uint8'
Typedef.coord = ':1:13'
数据类型定义 Typedef 属性如下： 
self.name = str （typedef定义对象）
self.quals = [str] （限定符号列表: const, volatile）
self.storage = [str] （存储说明符列表: extern, register, etc.）
self.type = Node （TypeDecl节点）
self.coord= str（定义对象所在行列） 
1.2.1.1 类型声明 TypeDecl
 
typedef int uint8;
TypeDecl = Typedef.type
TypeDecl.name = 'uint8'
TypeDecl.coord = ':1:13'
Typedef 的下一级 类型声明 TypeDecl 是以typedef语句格式为中心 
类型声明 TypeDecl 属性如下： 
self.name = str （typedef定义对象）
self.quals = [str] （限定符号列表: const, volatile）
self.storage = [str] （存储说明符列表: extern, register, etc.）
self.type = Node （ IdentifierType节点）
self.coord= str（定义对象所在行列） 
1.2.1.1.1 标识符类型 IdentifierType
 
typedef int uint8;
TypeDecl = Typedef.type
IdentifierType = TypeDecl.type
IdentifierType.names = ['int']
IdentifierType.coord = ':1:9'
TypeDecl 的下一级 标识符类型 IdentifierType 是简单标识符，比如void, char定义之类 
标识符类型 IdentifierType 属性如下：
 self.name = [str] （标识符字符串列表） 
self.coord= str（标识符字符串所在行列） 
1.2.2 变量声明 Decl
 
uint8 a = 0;
Decl.name = 'a'
Decl.quals = ['const', 'volatile']
Decl.coord = ':5:22'
变量声明 Decl 属性如下： 
self.name = str (被声明的变量名）
self.quals = [str] （限定符号列表: const, volatile）
self.storage = [str] （存储说明符列表: extern, register, etc.）
self.funcspec = [str] （函数说明符列表: C99的inline）
self.type = Node （TypeDecl节点）
self.init = Node （初始化值，Constant节点）
self.bitsize = Node （位域bit field大小，或者为None） 
1.2.2.1 常量 Constant
 
常量 Constant 属性如下： 
self.type= str （基本数据类型，int等）
self.value= str （数值）
self.coord= str（标识符字符串所在行列） 
1.2.3 函数定义 FuncDef
 
FuncDef 方法定义，不同于 FuncDecl，有具体的函数实现过程 
int test(uint8 b)
  b = 0;
  return b;
函数定义 FuncDef 属性如下： 
self.decl = Node （一般是包含FuncDecl的Decl节点）
self.body = Node （函数实现的代码块）
self.coord= str（标识符字符串所在行列） 
1.2.4 函数声明 FuncDecl
 
FuncDecl既可以单独存在，也可以是函数定义的一部分 
int test(uint8 b)
  b = 0;
  return b;
                    Python - C语言语法解析：pycparser模块0 前言1 pycparser模块（三方库）1.1 方法列表1.2 示例0 前言&gt;&gt;返回Python系列文章目录&lt;&lt;pycparser是python的一个用于解析C语言的第三方库，用于获取C语言的语法树1 pycparser模块（三方库）argparse模块是Python的第三方库，需要安装pip install pycparser pycparser模块导入方式# parser_file 用于处理c语言文件
 1.1什么是pycparser？
 pycparser是用纯Python编写的C语言解析器。 它是一个模块，旨在轻松集成到需要解析C源代码的应用程序中。
 1.2有什么好处？
 任何需要解析C代码的内容。 以下是从实际用户报告中获取的pycparser的一些用法：
 C代码混淆器
各种专用C编译器的前端
静态代码检查器
自动单元测试发现
向C语言添加专门的扩展
pycparser最受欢迎的用途之一是在cffi库中，该库使用它来解析C函数和类型的声明，以便自动生成FFI。
 pycparser的独特之处在于它是用纯Python编写的-一种非常高级的语言，易于尝试和调整。 对于熟悉Lex和Yacc的人来说， pycparser的代码将很容易理解。 它还没有外部依赖关系（Pyth
				上篇文章：用pycparser解析C语言踩坑记录
简单的使用参考GitHub库中给的example即可。如果想要进行深度使用，可以参考c_ast.py和_c_ast.cfg文件，在里面详细描述了不同类型节点的定义。接下来我会对此详细描述，并介绍这些节点的用法。
所有类型的节点都是由Node类继承而来，例如
				1.Pycparser介绍
项目链接：https://github.com/eliben/pycparser
Pycparser是C语言的解析器，支持完整的C99标准，用纯Python编写。
非常方便对C语言源码的解析和处理，如生成AST、提取源码中函数调用关系等。
Pycparser非常容易上手，需重点阅读examples目录和c_ast.py文件
2.源码解读
c_ast.py文件解读
_c...
				python使用pycparser库将c语言程序转变为抽象语法树（ast）
pycparser库github地址：
https://github.com/eliben/pycparser
from __future__ import print_function
from pycparser.c_ast import *
from util.remove_zs import rm_emptyline, rm_includeline, rmCommentsInCFile
sys.path.ex
				这篇文章根据上一篇的内容做补充：python环境做C语言分析-pycparser的使用方法（1）
这里介绍简单的pycparser使用方法，提供一种 遍历 抽象语法树AST 节点c_ast.py的方法，不用去对抽象语法树每一种节点的属性做条件判断，就能遍历成序列的形式，可以说是：
c语言代码->pycparser的AST节点类->AST遍历序列
c语言代码->AST节点
这里展示不使用gcc或llvm编译器处理#include或#define的方法，如果想处理这些语句可以看上一篇文章。
				pycparser是python的一个用于解析C语言的第三方库，相比于LLVM、CDT等安装使用过程较为简洁，它的官方开源库为https://github.com/eliben/pycparser。以下步骤记录我的安装和初步使用过程
没什么好说的，直接
pip install pycparser
如果遇到下图错误，有可能是网络原因，可以尝试 -i 添加镜像再下载
pip install pycparser -i http://pypi.douban.com/simple/ .
 用Python编写的C解析器和解释器。 还包括一个自动的ctypes接口生成器。
 它比C语法宽松，也就是说，它通常应该支持C语言的超集。
 由于目前我并没有严格遵守语言规范，而是通过对真实源代码的迭代改进来改进解析器，因此某些支持此时可能有点不完整或错了。
解析器/ ctypes接口生成器：
  。 使用纯Python完成C99解析器。 它取决于 。 （我尚未对其进行测试。似乎是最完整，最专业的项目。如果您不想要C解释器，则可能是您应该使用的项目。）
  （ ）。 速度很慢，对我来说效果不佳。
  。 也使用Lex + Yacc。
 。 使用GCC-XML。 关于这种方法的弊端，请参见下文。
  。 Python。
  。 不在Python中。 可能是最著名的。
 不在Python中。 并不是真正的免费。
 。 不在Python中。
  。 不在Python中。 “一个很小的C解释器。”
  。 不在Python中。
为什么要这个项目？
 更加灵活。 现在，使用手写解析器在解析管道的某些级别上执行操作要容易得多。
 我想要一些独立的代码，这
`parse_file`的参数	说明
`use_cpp`	是否使用本地c语言编译器预处理代码，去掉其中的#命令（头文件、宏定义、pragma）
`cpp_path`	本地c语言编译器路径
`cpp_args`	fake_libc_include文件夹路径，`use_cpp=True`时使用，需要从官网下载