记一次生产数据库sql优化案例--with用法改写(11分钟优化到7秒)
oygpt 2024-09-23 12:17 117 浏览 0 评论
概述
前段时间开发丢了一个超长的sql给我,说需要优化,因为太长,连PL/SQL的美化工具都美化不了...下面简单记录一下优化的过程。
with改写
WITH AS短语,也叫做子查询部分(subquery factoring),可以做很多事情,定义一个SQL片断,该SQL片断会被整个SQL语句所用到。有的时候,是为了让SQL语句的可读性更高些,也有可能是在UNION ALL的不同部分,作为提供数据的部分。
特别对于UNION ALL比较有用。因为UNION ALL的每个部分可能相同,但是如果每个部分都去执行一遍的话,则成本太高,所以可以使用WITH AS短语,则只要执行一遍即可。如果WITH AS短语所定义的表名被调用两次以上,则优化器会自动将WITH AS短语所获取的数据放入一个TEMP表里,如果只是被调用一次,则不会。而提示materialize则是强制将WITH AS短语里的数据放入一个全局临时表里。
1、查看数据量及表信息
这里有一张大表,2000万数据,还有一个小表,整个sql其实就是先对小表做查询得出结果集2000多条,然后2000多条再去跟大表去做关联。
2、获取sqlid
3、查看执行计划
--explain plan for select XXX --select * from table(dbms_xplan.display(table_name=>'PLAN_TABLE',statement_id=>null,format=>'ALL'));
4、优化前耗时
15行耗时64秒
全部1000多条查完需要11分钟
5、奇怪的现象
结果集t查询出来速度是不慢的,数据量2000多条,但是跟fsl_trunkshipment_detail做关联查询的时候查询100条需要63秒,查询出全部数据就需要最少11分钟了。
这里用with写法改写了下:
WITH tmp AS (select DISTINCT sequence_no, location_xid, packaged_item_gid, packaging_unit_gid, transport_handling_unit_gid, pkg_foldv, pkg_regularv, pte_foldv, pte_regularv .... SELECT d.handle_plate_code,d.plastic_box_code FROM fsl_trunkshipment_detail d,tmp WHERE d.packaged_item_id = REPLACE(tmp.packaged_item_gid, 'FSL.', '') AND d.request_plant_id = tmp.location_xid AND d.shipment_xid = 'BS2019033054709' AND d.jit_month = '201904'
优化后sql耗时为7秒,满足需求。
后面会分享更多devops和DBA方面的内容,感兴趣的朋友可以关注一下~
相关推荐
- PLSQL 命令行模式常见错误(plsql执行命令行)
-
日常运维过程中,经常使用PLSQL的command模式运行SQL脚本,对于一些常见的错误,你知道原因在哪里吗?1.SQL脚本执行后弹出输入框原因:SQL*PLUS默认环境里会把'&字符'...
- 了解 PL/SQL 的异常处理(sql数据库异常处理)
-
6.PL/SQL的异常处理在程序运行时出现的镇误,称为异常。发生异常后语句将停止执行,PL/SQL引擎立即将控制权转到PL/SQL块的异常处理部分。异常处理机制简化了代码中的错误检测。PL/SQ...
- PL/SQL 泛型编程详解(泛型调用)
-
PL/SQL中的通用函数,也称为泛型函数,是一种可以接受任意数据类型参数的函数。这使得开发者能够编写可重用的代码,以处理不同的数据类型,而无需为每种数据类型编写专门的函数。PL/SQL的泛型函数通过使...
- PL/pgSQL编写postgresql函数之基本语句
-
目录基本语句1赋值赋值运算符:=或=2单一行结果返回SELECT...INTO语法赋值更新操作结果返回3多行结果返回方式一:使用表充当容器方式二:使用自定义TYPE充当容器方式三:ret...
- PLSQL安装教程(plsql安装教程及配置)
-
2.安装,双击上图Plsqldev.exe文件;3.单击确定,进行下一步安装;4.软件询问是否遵守协议,单击“IAgree”,进行下一步安装;5.选择软件安装在计算机中的路径,(客户端的安装...
- PL/SQL字符函数概览(sqlplus 字符集)
-
PL/SQL提供了一系列内置的字符函数,这些函数可以对字符串进行各种操作,如转换、比较、搜索和替换等。以下是一些常用的PL/SQL字符函数及其用法示例:CONCAT:连接两个或多个字符串。示例:DEC...
- instantclient + PLSQL安装与配置小结
-
一、软件1、instantclient-basic-windows.x64-11.2.0.4.0.zip到官网下载。2、PLSQLDeveloper13.rar到网上下载,找破解版的,网上有V...
- 如何使用 PL/SQL 块 ?(pl/sql 使用教程)
-
2.PL/SQL块PL/SQL是一种块结构的诺言,一个PL/SQL程序包含了一个或者多个逻辑块,逻辑块中可以声明变量,变量在使用之前必须先声明。除了正常的执行程序外,PL/SQL还提供了专门的异...
- PL/SQL(Procedural Language(procedural objects)
-
PL/SQL(ProceduralLanguage/StructuredQueryLanguage)是由OracleCorporation开发的一种用于与Oracle数据库配合使用的编...
- Oracle数据库扩展语言PL/SQL之块结构
-
【本文详细介绍了Oracle数据库扩展语言PL/SQL的块结构,欢迎读者朋友们阅读、转发和收藏!】1基本概念1.1PL/SQL块结构块(block)是PL/SQL的基本程序单元,编写P...
- 记一次生产数据库sql优化案例--with用法改写(11分钟优化到7秒)
-
概述前段时间开发丢了一个超长的sql给我,说需要优化,因为太长,连PL/SQL的美化工具都美化不了...下面简单记录一下优化的过程。with改写WITHAS短语,也叫做子查询部分(subquery...
- 如何在生产库与测试库做数据结构对比--PL/SQL工具
-
概述领导要求做个数据库之间的数据结构对比,这里我简单用PL/SQL工具来实现,下面介绍下使用过程。功能PLSQLDeveloperTools菜单下有CompareUserObjects和Com...
- PLSQL使用教程——(1)基本使用教程
-
一、登录1、在这里配置好数据库服务,之后就可以登录了2、输入用户名和密码,并选择之前配置好的数据库服务。我这服务名取为localhost。(这个名字随意起。)二、创建表空间1、在SQL窗口中执行以下S...
- PL/SQL调试存储过程?看这篇就够了
-
概述虽然现在存储过程相对比较少用了,但是平时接触不可避免的要跟存储过程打交道,当需要自己写的时候总会碰到这或那的错误,这个时候一般要怎么调试呢?PL/SQL调试PL/SQL中提供了【调试存储过程】的功...
- IT运维基础篇之oracle sqlldr数据批量导入,比plsqldev还简单
-
在oralce中导入数据的方式有很多,比如:PL/SQL文本导入器、对表forupdate之后直接复制粘贴等等,导入方式有很多,今天我们介绍另一种大批量数据导入方式:sqlldr,具体其用法可以上网查...