openGauss内核分析:执行计划生成「建议收藏」

openGauss内核分析:执行计划生成「建议收藏」摘要:SQL语句解析完成后被解析成Query结构,在进行优化时是以Query为单位进行的,Query的优化分为基于规则的逻辑优化(查询重写)和基于代价的物理优化(计划生成),主入口函数为subquer

openGauss内核分析:执行计划生成

摘要:SQL语句解析完成后被解析成Query结构,在进行优化时是以Query为单位进行的,Query的优化分为基于规则的逻辑优化(查询重写)和基于代价的物理优化(计划生成),主入口函数为subquery_planner。subquery_planner函数接收Query(查询树),返回一个Plan(计划树)。

本文分享自华为云社区《openGauss内核分析(六) 执行计划生成》,作者:Gauss松鼠会。

SQL语句解析完成后被解析成Query结构,在进行优化时是以Query为单位进行的,Query的优化分为基于规则的逻辑优化(查询重写)和基于代价的物理优化(计划生成),主入口函数为subquery_planner。subquery_planner函数接收Query(查询树),返回一个Plan(计划树)。

Plan* subquery_planner(PlannerGlobal* glob, Query* parse, PlannerInfo* parent_root, bool hasRecursion,
    double tuple_fraction, PlannerInfo** subroot, int options, ItstDisKey* diskeys, List* subqueryRestrictInfo)
{
    PlannerInfo* root = NULL;
Plan* plan = NULL; //返回结果
…
preprocess_const_params(root, (Node*)parse->jointree); // 常数替换等式
if (parse->hasSubLinks) {
        pull_up_sublinks(root); //提升子链接
        DEBUG_QRW("After sublink pullup");
    }
 /* Reduce orderby clause in subquery for join */
    reduce_orderby(parse, false); //减少orderby
    DEBUG_QRW("After order by reduce");
    if (u_sess->attr.attr_sql.enable_constraint_optimization) {
        removeNotNullTest(root); //删除NotNullTest
        DEBUG_QRW("After soft constraint removal");
    }
…
    if ((LAZY_AGG & u_sess->attr.attr_sql.rewrite_rule) && permit_from_rewrite_hint(root, LAZY_AGG)) {
        lazyagg_main(parse); // lazyagg重写
        DEBUG_QRW("After lazyagg");
}
…
parse->jointree = (FromExpr*)pull_up_subqueries(root, (Node*)parse->jointree); //提升子查询
if (parse->setOperations) {
        flatten_simple_union_all(root); //UNIONALL优化
        DEBUG_QRW("After simple union all flatten");
}
…
expand_inherited_tables(root); //展开继承表
…
parse->targetList = (List*)preprocess_expression(root, (Node*)parse->targetList, EXPRKIND_TARGET); //预处理表达式
…
parse->havingQual = (Node *) newHaving; //处理HAVING子句
…
        reduce_outer_joins(root); //外连接消除
…
                reduce_inequality_fulljoins(root); //全连接重写
    …
plan = grouping_planner(root, tuple_fraction); //主要的计划过程
return plan;
}

subquery_planner函数由函数standard_planner调用,standard_planner函数由exec_simple_query->pg_plan_queries->pg_plan_query->planner函数调用。standard_planner将Query(查询树)生成规划好的语句,可用于执行器实际执行。

PlannedStmt* standard_planner(Query* parse, int cursorOptions, ParamListInfo boundParams)
{
    PlannedStmt* result = NULL;  //返回结果
PlannerGlobal* glob = NULL;  
double tuple_fraction;
    PlannerInfo* root = NULL;
Plan* top_plan = NULL;
…
    glob = makeNode(PlannerGlobal); 
 /* primary planning entry point (may recurse for subqueries) */
top_plan = subquery_planner(glob, parse, NULL, false, tuple_fraction, &root);  //主规划过程入口
/* build the PlannedStmt result */
result = makeNode(PlannedStmt);  //构造PlannedStmt
result->commandType = parse->commandType;
result->queryId = parse->queryId;
result->uniqueSQLId = parse->uniqueSQLId;
result->hasReturning = (parse->returningList != NIL);
result->hasModifyingCTE = parse->hasModifyingCTE;
result->canSetTag = parse->canSetTag;
result->transientPlan = glob->transientPlan;
result->dependsOnRole = glob->dependsOnRole;
result->planTree = top_plan; //执行计划
result->rtable = glob->finalrtable;
result->resultRelations = glob->resultRelations;
…
    return result;
}

仍然以前文的join列子来说明

SELECT * FROM t1 inner JOIN t2 ON t1.c1 = t2.c1;复制

在planner函数打断点,用gdb查看standard_planner返回的PlannedStmt

(gdb) bt
#0  planner (parse=0x7fd93a410288, cursorOptions=0, boundParams=0x0) at planner.cpp:389
#1  0x0000000001936fbd in pg_plan_query (querytree=0x7fd93a410288, cursorOptions=0, boundParams=0x0, underExplain=false) at postgres.cpp:1197
#2  0x0000000001937381 in pg_plan_queries (querytrees=0x7fd939b81090, cursorOptions=0, boundParams=0x0) at postgres.cpp:1315
#3  0x000000000193a6b8 in exec_simple_query (query_string=0x7fd966ad2060 "SELECT * FROM t1 inner JOIN t2 ON t1.c1 = t2.c1;", messageType=QUERY_MESSAGE, msg=0x7fd931056210)
    at postgres.cpp:2560
#4  0x0000000001947104 in PostgresMain (argc=1, argv=0x7fd93a2cf1c0, dbname=0x7fd93a2ce1f8 "postgres", username=0x7fd93a2ce1b0 "test") at postgres.cpp:8403
#5  0x0000000001890740 in BackendRun (port=0x7fd931056720) at postmaster.cpp:8053
#6  0x00000000018a00b1 in GaussDbThreadMain<(knl_thread_role)1> (arg=0x7fd97c55c5f0) at postmaster.cpp:12181
#7  0x000000000189c0de in InternalThreadFunc (args=0x7fd97c55c5f0) at postmaster.cpp:12755
#8  0x00000000024bf7d8 in ThreadStarterFunc (arg=0x7fd97c55c5e0) at gs_thread.cpp:382
#9  0x00007fd9a60cfdd5 in start_thread () from /lib64/libpthread.so.0
#10 0x00007fd9a5df8ead in clone () from /lib64/libc.so.6
(gdb) p *result
$14 = {type = T_PlannedStmt, commandType = CMD_SELECT, queryId = 0, hasReturning = false, hasModifyingCTE = false, canSetTag = true, transientPlan = false, dependsOnRole = false,
  planTree = 0x7fd93a409d58, rtable = 0x7fd939b81660, …}
(gdb) p *result->planTree->lefttree
$46 = {type = T_SeqScan, plan_node_id = 2, parent_node_id = 1, exec_type = EXEC_ON_DATANODES, startup_cost = 0, total_cost = 1.03, plan_rows = 3, multiple = 1, plan_width = 8,…}

将Query规划后得到PlannedStmt

openGauss内核分析:执行计划生成「建议收藏」
openGauss内核分析:执行计划生成「建议收藏」

可以看到,Plannedstmt 与explain执行计划是一致的

openGauss内核分析:执行计划生成「建议收藏」

 

点击关注,第一时间了解华为云新鲜技术~

原文地址:https://www.cnblogs.com/huaweiyun/archive/2022/08/29/16635198.html

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。
转载请注明出处: https://daima100.com/4844.html

(0)
上一篇 2023-06-02
下一篇 2023-06-02

相关推荐

  • 理解编程中的节点及其作用

    理解编程中的节点及其作用在编程中,节点是一种十分重要的概念。节点是程序中的基本单元,用于描述一个数据的特定状态或一种操作的执行情况等。节点通过连接组合在一起,形成一个完整的程序逻辑。本文将从不同角度来详细阐述节点的作用及其相关内容。

    2024-01-09
    76
  • TICK技术栈(四)Grafana安装及使用「建议收藏」

    TICK技术栈(四)Grafana安装及使用「建议收藏」1.什么是Grafana? Grafana是一款采用go语言和Angular框架编写的开源的可视化工具,主要用于大规模指标数据的可视化展示,提供包括折线图,饼图,仪表盘等多种监控数据可视化UI,是网络

    2022-12-18
    94
  • MySQL 游标 – G

    MySQL 游标 – GMySQL 游标 SQL语句是“面向集合编程”,重点在于“获得什么”,而不是“如何获得”。 有时候我们不需要对查询结构集的每一条都进行相同的操作,而是只操作其中的某些行,这时候就需要面向过程的编程方法

    2023-03-17
    107
  • python的gui设计器(用python设计gui界面)

    python的gui设计器(用python设计gui界面)wxpython 是供 python 使用的 GUI 工具。另外还可以用 Tkinter, PyQT,pyGtk等很多。

    2023-11-24
    74
  • 大数据Hadoop之——数据采集存储到HDFS实战(Python版本)

    大数据Hadoop之——数据采集存储到HDFS实战(Python版本)要实现这个示例,必须先安装好hadoop和hive环境,环境部署可以参考我之前的文章: 大数据Hadoop原理介绍+安装+实战操作(HDFS+YARN+MapReduce) 大数据Hadoop之——数

    2023-05-19
    102
  • 荣耀路由3开箱_荣耀路由3覆盖范围

    荣耀路由3开箱_荣耀路由3覆盖范围     520快到了,送什么礼物给男朋友呢?正好,昨天刷微博的时候看到了荣耀智慧生活新品发布会正在直播,看过之后我决定了,就送这款荣耀路由3!以前和男朋友视频通话的时候总是卡顿,一起吃鸡的时候他也…

    2023-03-03
    103
  • 数据的完整性「终于解决」

    数据的完整性「终于解决」10.1什么是数据完整性 作用:保证 用户的输入的数据 保存到数据库 是正确的 比如: 年龄:应该是数字, 学号:应该是不重复的 成绩:不能为空 。 。&#16

    2023-04-11
    97
  • SQL server 索引_sql如何添加索引

    SQL server 索引_sql如何添加索引在做开发过程中经常会接触数据库索引,不只是DBA才需要知道索引知识,了解索引可以让我们写出更高质量代码。简单介绍索引的概述,聚集索引,非聚集索引,唯一索引,复合索引,筛选索引使用及注意事项

    2023-02-13
    102

发表回复

您的电子邮箱地址不会被公开。 必填项已用*标注