SQLite源码分析1 整体架构


简介

https://www.sqlite.org SQLite是一个轻量数据库,应用广泛。一个数据库一个文件。

  • self contained 依赖少。可整合成一个c文件(https://www.sqlite.org/amalgamation.html)。 只依赖十个左右的标准C库函数。

  • Serverless 无服务。没有C/S结构、进程间网络间通讯,只在一个进程里跑。

  • Zero-Configuration 不需要配置,直接可使用。

  • Transactional 符合ACID原则。各种崩溃都不会影响操作的原子性或损毁文件。


整体架构

见https://www.sqlite.org/arch.html

  • Tokenizer分词器 把sql语句解成一个个token,传给paser进行语法解析。类似编译器那一套东西。

  • Parser语法分析器 https://www.sqlite.org/lemon.html 根据定义好的sql语法,解析token串。 规则在parse.y

  • Code Generator https://www.sqlite.org/opcode.html 处理语法树,生成bytecode。 包含一批类似delete.c,insert.c的代码,处理各种sql语句,转换成合适的bytecode。

  • Bytecode Engine bytecode用一个虚拟机来执行。代码为vdbe.c。

  • B树 数据库的核心数据结构。每个表、每个index都有一棵B树。

  • Page Cache页缓存 除了页缓存的基础功能。还实现原子操作、回滚等功能。

  • OS Interface os接口层,实现跨平台。 https://www.sqlite.org/vfs.html

  • Utilities 其他辅助功能。比如内存分配、字符串-数字转换、unicode处理等等。

  • Test Code 测试流程


命令行功能结构

linux下输入sqlite3 test_db,进入sqlite命令行,自动打开test_db这个数据库文件。 并接受用户输入的sql语句。

看源代码shell.c的main函数如何实现这一流程。

   main()
       做各种初始化和配置,包括main_init。

       处理参数。

       sqlite3_initialize()

       sqlite3_appendvfs_init()

       open_db() // 打开数据库
           SHELL_OPEN_NORMAL
           sqlite3_open_v2()(main.c)
               openDatabase()
                   sqliteInt.h包含各种内部接口的定义。
                   比如全局配置,Sqlite3Config。

                   createCollation()

       打印欢迎信息 “SQLite version ...”

       process_input() // 死循环处理命令行的输入
           one_input_line() // 解出一行sql语句

           runOneSqlLine() // 运行一条sql语句
               shell_exec()
                   sqlite3_prepare_v2
                       sqlite3LockAndPrepare
                           sqlite3Prepare() // Compile the UTF-8 encoded SQL statement zSql into a statement handle

                               sqlite3RunParser()(tokenize.c)
                               sqlite3Parser() // 这里开始语法解析。sqlite3Parser在parse.y里定义。

       各种free

       结束

总结

了解了SQLite的整体架构和命令行流程


参考

https://www.sqlite.org/arch.html https://www.zhihu.com/question/22819578