前言: 很多人都在使用mysql数据库,但是很少有人能够说出来整个sql语句的执行过程是怎样的,如果不了解执行过程的话,就很难进行sql语句的优化处理,也很难设计出来优良的数据库表结构。...这篇文章主要是讲解一下sql语句的执行过程。 sql语句的执行过程: 客户端、连接器、分析器、优化器、执行器、存储引擎几个阶段。 连接器的作用:管理链接、权限验证的处理。...当然了,不同的存储引擎的表数据存储方式也是不一样的。 连接器: 执行sql语句的时候,第一步需要进行数据库的连接处理,连接器负责客户端建立连接、获取权限、维持和管理连接。...查询缓存: 连接建立完毕之后,进行查询缓存的处理,执行sql语句会先到缓存中看看是不是刚刚执行了这条语句,之前执行过的语句及其结果就会以key-value对的形式直接存储在内存中的,key是查询的语句,...然后进行语法分析的处理,根据词法分析,根据词法分析的结果,语句分析器就会根据语法规则判断输入的这个sql语句是否满足mysql的语法。
开发人员基本都知道,我们的数据存在数据库中(目前最多的是MySQL和Oracle,由于作者更擅长MySQL,所以这里默认数据库为MySQL),服务器通过sql语句将查询数据的请求传入到MySQL数据库。...流程概述 MySQL得到sql语句后,大概流程如下: 1.sql的解析器:负责解析和转发sql 2.预处理器:对解析后的sql树进行验证 3.查询优化器:得到一个执行计划 4.查询执行引擎...sql的解析器与预处理 sql解析器是在命令分发之后,将对应的sql语句,解析为sql解析树。sql解析树是MySQL本身内部的语法规则和解析查询。...成本指的是MySQL根据相关的统计信息,算出来sql语句对应的io,cpu等的消耗的一个估计值。计算过程涉及到索引、表、行等数据,过程比较复杂。 ...+返回数据给客户端 得到执行计划后,根据已有的执行计划,查询执行引擎,MySQL的SQL Layer层,调用Storage Engine Layer层的接口,从MySQL的存储引擎中获取到相对应的结果集
SQL(结构化查询语言)语句的执行过程在数据库管理系统中是一个复杂但有序的过程。...以下是SQL语句(特别是查询语句)在关系型数据库管理系统(RDBMS)中的典型执行过程: 解析(Parsing): 当SQL语句被提交给数据库时,它首先被解析器(Parser)接收。...解析器检查SQL语句的语法是否正确,并生成一个解析树(Parse Tree)或查询树(Query Tree)。 如果SQL语句中存在语法错误,解析器会返回一个错误消息。...对于其他类型的SQL语句(如INSERT、UPDATE、DELETE),数据库会返回一个表示操作是否成功的消息。...此外,对于复杂的查询或大型的数据集,执行过程可能会涉及更多的步骤和复杂性。
EVENT if not exists e_test on schedule every 30 second on completion preserve do call test(); 每隔30秒将执行存储过程...实战mysql存储程序与定时器 存储过程定时器eventprocedure实战 需求:一个庞大的日志表,现每天做定时统计一天的总数,放另一个表中,方便查看,运营。...旧方案:用脚本写好程序,用linux的crontab定时执行。 本文重点,用mysql定时器定时执行存储程序。...执行这个语句之前要先 Sql代码 delimiter $$ 执行完成后再 Sql代码 delimiter ; 用show查看是否已经成功 Sql代码 show procedure status like...‘%%’; 第二步:开启mysql定时器 如果不是on,就执行 Sql代码 set global event_scheduler=1; 不需要重启mysql 会发现mysql多起了一个daemon进程
大多数时候不建议使用缓存,因为只要一个表更新,这个表上的所有缓存数据就会被清空了。对于那些经常更新的表来说,缓存命中率很低。MYSQL8版本直接将查询缓存的整块功能删掉了。...第三步:分析器 分析器首先会做“词法分析”,MYSQL会识别出SQL语句里面的字符串是什么以及代表什么。接下来就是“语法分析器”,分析SQL的语法问题。...第四步:优化器 优化器会对SQL的执行顺序,使用哪个索引进行优化。确定SQL的执行方案。 第五步:执行器 执行器执行SQL语句会对权限进行校验,如果有权限,就打开表继续执行。...打开表的时候,执行器就会根据表的引擎定义,去使用这个引擎提供的接口。 图片 一条update语句执行流程 update语句除了会执行上面的五步,还会涉及两个重要的日志模块。...更新语句的内部流程 update t set n = n+2 where id =1 执行器先找引擎找到id=1的那一行,如果这一行的数据页已经在内存中则直接返回给执行器。
昔日庖丁解牛,未见全牛,所赖者是其对牛内部骨架结构的了解,对于MySQL亦是如此,只有更加全面地了解SQL语句执行的每个过程,才能更好的进行SQL的设计和优化。 ...服务器端进行SQL解析、预处理,再由优化器生成对应的执行计划。 MySQL根据优化器生成的执行计划,再调用存储引擎的API来执行查询。 将结果返回给客户端。...SQL语句执行过程 查询缓存 MySQL查询缓存保存查询返回的完整结构。当查询命中该缓存时,MySQL会立刻返回结果,跳过了解析、优化和执行阶段。 ...如果在一条SQL语句执行的过程中将该语句对应的最终执行计划进行缓存,当相似的语句再次被输入服务器时,就可以直接使用已缓存的执行计划,从而跳过SQL语句生成执行计划的整个过程,进而可以提高语句的执行速度。...参考 SQL优化器原理——查询优化器综述 https://zhuanlan.zhihu.com/p/40478975 《高性能MySQL》 《MySQL技术内幕-InnoDB存储引擎》
一、客户端的MySQL驱动: 我们的系统在和 MySQL 数据库进行通信前,需要先和数据库建立连接,而这个功能就是由MySQL驱动底层帮我们完成的,建立完连接之后,我们只需要发送 SQL 语句就可以执行...二、MySql架构的Server层: 在介绍MySQL数据库中SQL语句在Server的执行步骤前,我们先了解下MySQL的整体架构: 如果上图不清楚,可以再看看下面的图: 通过上面的架构图可以得知...在执行的SQL语句前添加上 explain 关键字即可; 5、执行器: MySQL 通过分析器知道了你要做什么,通过优化器知道了该怎么做,于是就进入了执行器阶段,开始执行语句。...执行器最终就是根据一系列的执行计划去调用存储引擎提供的API接口去调用操作数据,完成SQL的执行。...key是SQL语句,value是查询结果。我们将这个过程称为查询缓存! (2)Buffer Pool位于存储引擎层。
昔日庖丁解牛,未见全牛,所赖者是其对牛内部骨架结构的了解,对于MySQL亦是如此,只有更加全面地了解SQL语句执行的每个过程,才能更好的进行SQL的设计和优化。 ...服务器端进行SQL解析、预处理,再由优化器生成对应的执行计划。 MySQL根据优化器生成的执行计划,再调用存储引擎的API来执行查询。 将结果返回给客户端。...SQL语句执行过程 查询缓存 MySQL查询缓存保存查询返回的完整结构。当查询命中该缓存时,MySQL会立刻返回结果,跳过了解析、优化和执行阶段。 ...当判断缓存是否命中时,MySQL不会进行解析查询语句,而是直接使用SQL语句和客户端发送过来的其他原始信息。所以,任何字符上的不同,例如空格、注解等都会导致缓存的不命中。 ...如果在一条SQL语句执行的过程中将该语句对应的最终执行计划进行缓存,当相似的语句再次被输入服务器时,就可以直接使用已缓存的执行计划,从而跳过SQL语句生成执行计划的整个过程,进而可以提高语句的执行速度。
通过这张图,我们可以直观的看到MySQL的内部结构,包括连接器、缓存、解析器、优化器、存储引擎以及支持DDL、DML、存储过程、视图等功能的SQL接口。...接下来,通过一条sql语句的执行来深入了解MySQL各个组件功能以及其作用。...一、SQL语句的执行流程 1、连接MySQL 通常我们会编写sql语句通过某个客户端来执行并且接受执行结果,比如命令行、JDBC、navicat。...SQL解析报错 而像 select id from table1 这条sql语句会被解析成下图: 解析树 如果想了解具体的解析过程可以参考这篇博客 4、优化SQL语句 通过解析器生成sql语法树后就到了...5、执行SQL语句 经过「优化器」后最终生成一个最优的执行计划交给「执行器」来执行,执行器通过调用「存储引擎」的接口来获取数据。 这里先不展开执行器与存储引擎的交互,后面的文章会详细阐述一下。
《高性能MySQL》 衡量查询开销的三个指标 响应时间扫描的行数 服务时间(处理这条语句真正花的时间) 排队时间(等待资源,例如IO,行锁等) 扫描的行数 返回的行数 当删除了搜索条件列的索引时,语句进行全表扫描...图二 语句的处理过程 1.连接数据库 客户端发起一条Query请求,监听客户端的‘连接管理模块’接收请求。 将请求转发到‘连接进/线程模块’。 调用‘用户模块’来进行授权检查。...查询优化处理(解析SQL、预处理、优化SQL的执行计划),将SQL转化成一个执行计划。 解析和预处理:生成一棵解析树(《编译原理》的知识),MySQL按照其语法对解析树进行验证和解析查询。...优化过程书上介绍了很多情况,请参考书籍6.43章 执行计划 MySQL会生成一个指令树,然后通过存储引擎完成这棵树并返回结果 如图2 查询执行引擎 查询执行引擎则根据执行计划来完成整个查询。...在执行计划时,存储引擎通过调用实现的接口来完成。 ? 图三 四个表的表连接查询的执行计划指令树 3.返回结果 如果查询可以被缓存,MySQL将结果存放到查询缓存里。
写在前面的话:有时不理解SQL语句各个部分执行顺序,导致理解上出现偏差,或者是书写SQL语句时随心所欲,所以有必要了解一下sql语句的执行顺序。可以有时间自己写一个简单的数据库,理解会更加深入。...没错,对于这样的简单的语句,一眼就能看出来,可是对于稍微复杂一些的SQL语句或者更加复杂的SQL语句,有时我们一眼就看不出来了,为了能够正确分析SQL语句以及写出正确的SQL语句,有必要了解一下SQL语句各部分的执行顺序...,为了讲解方便,我也没有弄一些跟实际相结合的表,要不还要理解业务逻辑,干脆越简单越好,毕竟目的是为了说明SQL语句的执行顺序,Table1和Table2如下: ?...(11)top:从游标VC9的开始处选择指定的行数,这里是1行,生成虚拟表VT10. 经过上面的过程,最终的SQL语句将VT10返回给用户使用。...所以以后再写SQL语句的时候,可以按照上面的顺序写SQL语句了,读SQL语句也可以按照上面的顺序去读,做到心里明白。
一、SQL语句执行原理: 第一步:客户端把语句发给服务器端执行 当我们在客户端执行 select 语句时,客户端会把这条 SQL 语句发送给服务器端,让服务器端的 进程来处理这语句。...第三步:语句执行 语句解析只是对 SQL 语句的语法进行解析,以确保服务器能够知道这条语句到底表达的是什么意思。等到语句解析完成之后,数据库服务器进程才会真正的执行这条 SQL 语句。...二是绝大部分 SQL 语句都是按照这个处理过程处理的。我们 DBA 或者基于 Oracle 数据库的开发人员了解这些语句的处理过程,对于我们进行涉及到 SQL 语句的开发与调试,是非常有帮助的。...二、SQL语句执行完整过程: 1.用户进程提交一个 sql 语句: update temp set a=a*2,给服务器进程。...,并根据ORACLE 选用的优化模式以及数据字典中是否存在相应对象的统计数据和是否使用了存储大纲来生成一个执行计划或从存储大纲中选用一个执行计划,然后再用数据字典核对此用户对相应对象的执行权限,最后生成一个编译代码
3、分析器 4、优化器 5、执行器 Server层 存储引擎(InnoDB)层 三个日志的比较(undo、redo、bin) 执行过程 Where 条件的提取 SQL执行顺序 写操作 读操作 文章正文:...写操作执行过程 如果这条sql是写操作(insert、update、delete),那么大致的过程如下,其中引擎层是属于 InnoDB 存储引擎的,因为InnoDB 是默认的存储引擎,也是主流的,...2、缓存(Cache) 也称为查询缓存,存储的数据是以键值对的形式进行存储,如果开启了缓存,那么在一条查询sql语句进来时会先判断缓存中是否包含当前的sql语句键值对,如果存在直接将其对应的结果返回...,mysql会计算各个执行方法的最佳时间,最终确定一条执行的sql交给最后的执行器。...SQL执行顺序 最后需要注意的是 SQL 语句关键词的解析执行顺序:
ALTER PROC [dbo].[Student_Friend_Get] @startRowIndexId INT, @max...
在日常的工作中,我们通常要分析 SQL 语句的性能,通过会使用到执行计划,利用执行计划来分析 SQL 语句的性能,并进行相应的优化;本文将利用 profile 分析 SQL 语句的执行过程来辅助的分析...SQL 语句,做好优化; 分析 SQL 执行带来的开销是优化 SQL 的重要手段。...该参数开启后,后续执行的 SQL 语句都将记录其资源开销,诸如 IO,上下文切换,CPU,Memory 等等。根据这些开销进一步分析当前 SQL 瓶颈从而进行优化与调整。...本文描述了如何使用 MySQL profile 以及利用 Performance_Schema 来查询 profile 的 SQL 执行过程的样例; 一、有关 profile 的描述 1、查看 profiling...query end:表示语句执行完毕了,但是还有一些后续工作没做完时的状态。
date_format(DATE_ADD(NOW(),INTERVAL 2 MONTH),"%Y-%m-01")); declare s1 varchar(32); DECLARE _sql...VARCHAR(255); set s1 = CONCAT('p',t1); set _sql = CONCAT("ALTER TABLE test....VALUES LESS THAN (",t2,"))"); ############以下为重点############ ## 普通变量改为全局变量 set @test_sql...= _sql; ## 预处理需要执行的动态SQL,其中stmt是一个变量 PREPARE stmt1 FROM @test_sql; ##执行SQL语句 EXECUTE
一、存储过程的创建 定义: 存储过程是为了完成特定功能的SQL语句集合,存储在数据库中,用户通过指定存储过程的名称并给出参数来执行。 优点: 1、方便修改。 ...因为存储过程是存储在数据库中的,如果需要涉及到修改SQL语句,那么数据库专业人员只需要去修改数据库中的存储过程就可以,对程序毫无影响,如果用SQL语句的话,SQL语句是写在程序中的,如果涉及到修改SQL...2、存储过程比SQL语句执行更快速: 存储过程是为了完成特定功能的SQL语句的集合,如果为了完成某一功能,使用了大量的SQL语句,那么执行存储过程只执行一次就可以,而SQL语句呢,则是需要执行多个。...语句管理和维护存储过程 2.1 使用sp_helptext查看存储过程student_sc的定义脚本 语句: sp_helptext student_sc 2.2 使用select语句查看student_sc...(3) 修改sQL语句,使之能查询051班所有女生的资料的存储过程 (3)删除存储过程stu_pr 选择存储过程stu _pr,右击,选择“删除”
目录 1 概念 2 执行过程 1 概念 连接器: 身份认证和权限相关(登录 MySQL 的时候)。...分析器: 没有命中缓存的话,SQL 语句就会经过分析器,分析器说白了就是要先看你的 SQL 语句要干嘛,再检查你的 SQL 语句语法是否正确。...第二步,语法分析,主要就是判断你输入的 sql 是否正确,是否符合 MySQL 的语法。 优化器: 按照 MySQL 认为最优的方案去执行。 执行器: 执行语句,然后从存储引擎返回数据。...2 执行过程 查询语句的执行: 1、鉴权 2、查询缓存 3、分析sql,提取关键字select 、表名、列字段、查询条件,然后判断语法 4、优化执行方案,自己的优化算法不一定是最优 5、再次权限校验...SQL 等执行过程分为两类, 一类对于查询等过程如下:权限校验—-》查询缓存—-》分析器—-》优化器—-》权限校验—-》执行器—-》引擎 对于更新等语句执行流程如下:分析器——》权限校验——》6267
SQL SERVER 存储过程 **相对于视图的优势(为什么使用存储过程):** Sql Server中视图通过简单的Select查询来解决多次复杂的查询,但是视图不能提供业务逻辑的功能,而存储过程可以...**什么是存储过程:** 存储过程(Procedure)是一组为了完成特定功能的Sql语句集合,相当于C#中的方法,只编译一次,经编译后存储在数据库中,用户可以通过制定的存储过程名称并给出所需参数来执行...正是由于存储过程只编译一次,所以它比单个Sql语句块要快速, 所以在一定程度上减少了网络流量,减轻网络负担。...存储过程的优点: 模块化编程 写一次存储过程,可以多次从应用程序的不同部分调用,重复使用 性能 存储过程提供更快的代码执行,减少了网络流量负担。...安全 用户无需使用写任何Sql语句去执行存储过程,防止了Sql注入攻击 可维护性 一组需求改变,修改存储过程即可再次重复调用 存储过程缺点: 不可移植性 每种数据库的内部编程语法都不太相同,当你的系统需要兼容多种数据库时最好不要用存储过程
创建存储过程 delimiter $$ # 自定义 mysql 的分隔符 CREATE PROCEDURE p1( in i1 int, # 仅用于传入参数用...存储过程 import pymysql PY_MYSQL_CONN_DICT = { "host" : '192.168.0.214', "port" : 3306, "user...) cusor = conn.cursor(cursor=pymysql.cursors.DictCursor) # 调用 p1 存储过程,传入4个参数 cusor.callproc('p1', args...=(1, 2, 3, 4)) # 返回获得的集合,即存储函数中的 SELECT * FROM tmp; 结果 res1 = cusor.fetchall() print(res1) # 以 python...固定格式获取返回的值:@_存储过程名_0, 第一个返回值 cusor.execute("select @_p1_0, @_p1_1, @_p1_2, @_p1_3") res2 = cusor.fetchall
领取专属 10元无门槛券
手把手带您无忧上云