开发人员基本都知道,我们的数据存在数据库中(目前最多的是MySQL和Oracle,由于作者更擅长MySQL,所以这里默认数据库为MySQL),服务器通过sql语句将查询数据的请求传入到MySQL数据库。...流程概述 MySQL得到sql语句后,大概流程如下: 1.sql的解析器:负责解析和转发sql 2.预处理器:对解析后的sql树进行验证 3.查询优化器:得到一个执行计划 4.查询执行引擎...sql的解析器与预处理 sql解析器是在命令分发之后,将对应的sql语句,解析为sql解析树。sql解析树是MySQL本身内部的语法规则和解析查询。...MySQL没有rbo优化器) 这些规则是硬编码在数据库的代码中的。rbo会根据输入的sql语句可以匹配到的优先级最高的规则去作为执行计划。例如:在rbo中有这么一条规则:有索引的情况下,使用索引。...执行完成后,将结果返回给客户端,如果是查询语句,并且开启了缓存,那么,MySQL会同时将结果集放到查询缓存中。然后将查到的结果集返回。如果是增删改操作,那么返回执行语句后受影响的行数。
查询缓存: 执行查询语句的时候,会先查询缓存(MySQL 8.0 版本后移除,因为这个功能不太实用)。...分析器: 没有命中缓存的话,SQL 语句就会经过分析器,分析器说白了就是要先看你的 SQL 语句要干嘛,再检查你的 SQL 语句语法是否正确。...第二步,语法分析,主要就是判断你输入的 sql 是否正确,是否符合 MySQL 的语法。 优化器: 按照 MySQL 认为最优的方案去执行。 执行器: 执行语句,然后从存储引擎返回数据。...2 执行过程 查询语句的执行: 1、鉴权 2、查询缓存 3、分析sql,提取关键字select 、表名、列字段、查询条件,然后判断语法 4、优化执行方案,自己的优化算法不一定是最优 5、再次权限校验...SQL 等执行过程分为两类, 一类对于查询等过程如下:权限校验—-》查询缓存—-》分析器—-》优化器—-》权限校验—-》执行器—-》引擎 对于更新等语句执行流程如下:分析器——》权限校验——》6267
前言 Django在查询数据时,大多数查询都能使用ORM提供的API方法,但对于一些复杂的查询可能难以使用ORM的API方法实现,因此Django引入了SQL语句的执行方法,有以下三种执行方式 extra...raw:执行原始SQL并返回模型实例对象。...execute:直接执行自定义SQL 以上3种方式,这里只介绍raw方式,用的最多,也最推荐使用 raw 只能实现数据查询操作,并且要依靠模型对象,在Pycharm里打开raw源码,如下图所示,它一共定义了...4个参数,每个参数如下: raw_query:SQL语句 params:如果raw_query设置字符串格式化%s,那么该参数为raw_query提供数值 translations:为查询的字段设置别名
select id from user where name = '张三';以该sql为例子,mysql会将该查询语句去查询缓存中查看,是否可以命中,如果命中则直接返回缓存中的结果。...如果该sql之前执行过,会以key-value的形式存储在查询缓存中,key为查询sql语句,value为语句执行的结果。...从分析器开始真正的进入sql语句执行的第一步,解析sql语句。...select查询相关的语句的执行比较容易理解,主要理解了上述mysql的执行模块就可以理解select语句是如何执行的。...更新语句的执行,除了mysql的执行模块外还有2个重要的日志模块(redo log、binlog),可以通过日志模块将mysql的数据恢复到近期任意一秒的状态。
MySQL默认不能实时查看执行的SQL语句,因为这会消耗一定的资源。 要开启这个功能,稍微配置一下,打开这个LOG记录就可以了。 1 查看LOG功能 首先,查看是否已经开启实时SQL语句记录。...语句功能,并指定自定义的log路径: mysql> SET GLOBAL general_log = 'ON'; mysql> SET GLOBAL general_log_file = '/var/...2.2 永久开启 永久有效需要配置my.cnf文件,加入下面两行: general_log = 1 general_log_file = /var/log/mysql/general_sql.log 重启...3 实时查看 过一小段时间后,就可以导出查看/var/lib/mysql/sql_statement.log文件了,里面记录了所有执行的SQL语句。...如果要实时查看该文件的改动,在Linux系统用tail命令: $ tail -f /var/lib/mysql/general_sql.log 另外,也可以用BareTail软件实时查看。
前言: 很多人都在使用mysql数据库,但是很少有人能够说出来整个sql语句的执行过程是怎样的,如果不了解执行过程的话,就很难进行sql语句的优化处理,也很难设计出来优良的数据库表结构。...这篇文章主要是讲解一下sql语句的执行过程。 sql语句的执行过程: 客户端、连接器、分析器、优化器、执行器、存储引擎几个阶段。 连接器的作用:管理链接、权限验证的处理。...最常用的是InnoDB,这个主要在Mysql5.5版本开始成为了默认存储引擎。 当在执行sql查询的时候,如果不指定引擎类型、默认使用的innoDB。...查询缓存: 连接建立完毕之后,进行查询缓存的处理,执行sql语句会先到缓存中看看是不是刚刚执行了这条语句,之前执行过的语句及其结果就会以key-value对的形式直接存储在内存中的,key是查询的语句,...然后进行语法分析的处理,根据词法分析,根据词法分析的结果,语句分析器就会根据语法规则判断输入的这个sql语句是否满足mysql的语法。
【重学 MySQL】四十、SQL 语句执行过程 select 语句的完整结构 SELECT 语句是 SQL(Structured Query Language)中用于从数据库表中检索数据的核心语句...select 语句执行顺序 SELECT语句的执行顺序在SQL中是一个重要的概念,它决定了数据库如何处理和返回查询结果。尽管在编写SQL语句时,我们可能按照SELECT ... FROM ......ORDER BY ...这样的顺序来书写,但实际上,数据库在执行这些语句时遵循的是不同的内部逻辑顺序。以下是SELECT语句的完整执行顺序: FROM/JOIN: 这是SQL语句执行的第一步。...这样做有助于保持SQL语句的清晰和可读性。 SQL 语句执行原理 SELECT 是先执行 FROM 这一步的。...同时因为 SQL 是一门类似英语的结构化查询语言,所以我们在写 SELECT 语句的时候,还要注意相应的关键字顺序,所谓底层运行的原理,就是我们刚才讲到的执行顺序。
昔日庖丁解牛,未见全牛,所赖者是其对牛内部骨架结构的了解,对于MySQL亦是如此,只有更加全面地了解SQL语句执行的每个过程,才能更好的进行SQL的设计和优化。 ...SQL语句执行过程 查询缓存 MySQL查询缓存保存查询返回的完整结构。当查询命中该缓存时,MySQL会立刻返回结果,跳过了解析、优化和执行阶段。 ...当判断缓存是否命中时,MySQL不会进行解析查询语句,而是直接使用SQL语句和客户端发送过来的其他原始信息。所以,任何字符上的不同,例如空格、注解等都会导致缓存的不命中。 ...解析和预处理 解析器通过关键字将SQL语句进行解析,并生成对应的解析树。MySQL解析器将使用MySQL语法规则验证和解析查询。 ...如果在一条SQL语句执行的过程中将该语句对应的最终执行计划进行缓存,当相似的语句再次被输入服务器时,就可以直接使用已缓存的执行计划,从而跳过SQL语句生成执行计划的整个过程,进而可以提高语句的执行速度。
分析器: 没有命中缓存的话,SQL 语句就会经过分析器,分析器说白了就是要先看你的 SQL 语句要干嘛,再检查你的 SQL 语句语法是否正确。 ...优化器: 按照 MySQL 认为最优的方案去执行。 执行器: 执行语句,然后从存储引擎返回数据。 ...连接建立后,执行查询语句的时候,会先查询缓存,MySQL 会先校验这个 sql 是否执行过,以 Key-Value 的形式缓存在内存中,Key 是查询预计,Value 是结果集。...MySQL 查询不建议使用缓存,因为查询缓存失效在实际业务场景中可能会非常频繁,假如你对一个表更新的话,这个表上的所有的查询缓存都会被清空。...3) 分析器 MySQL 没有命中缓存,那么就会进入分析器,分析器主要是用来分析 SQL 语句是来干嘛的,分析器也会分为几步: 第一步,词法分析,一条 SQL
简单的 SQL 语句 mysql> select * from User where ID=10086; 上面是一条非常简单的 SQL 查询语句,咋一看是不是觉得很简单,但却不懂它内部的执行流程?...根据自己的理解,我画了个不那么专业的执行流程图,先给出这条 SQL 语句的执行流程,再逐步解析每个流程,执行流程图如下: ?...SQL语句执行流程图 你可以清晰地看到,MySQL 其实分为两层,server 层和存储引擎层。...连接建立完成后,接下来,select 语句就是到查询缓存中判断是否有当前语句的缓存,若有直接返回结果集。 使用了查询缓存效率会很高。但一般不建议用,为什么? 为什么不建议用查询缓存?...分析器 如果没命中缓存就要开始执行语句了,但在执行之前 MySQL 需要知道你想干嘛。因此会对语句进行分析,这时就是分析器的活了。
mysql不走索引的SQL语句 提起索引大家都不陌生,但在mysql中也有不使用索引的情况,接下来我们一起看看都有哪些不走索引的sql语句。 1、索引列参与表达式计算。...* FROM 'manong' WHERE `uname` LIKE '码农%' -- 走索引 SELECT * FROM 'manong' WHERE `uname` LIKE '%码农%' -- 不走索引... char(10)); EXPLAIN SELECT * FROM 'a' WHERE 'a'="1" -- 走索引 EXPLAIN SELECT * FROM 'a' WHERE 'a'=1 -- 不走索引...MySQL内部优化器会对SQL语句进行优化。 以上就是mysql不走索引的SQL语句,希望对大家有所帮助。
发表于2019-08-212020-03-03 作者 Ryan 首先, 明确一下在MySQL 中,执行 SQL 语句流程如下(图来自网络): image.png 一条 SQL...语句的执行,主要经过两个重要的组件:1....下面来讲一下,如何定位 SQL 未走索引的原因 我们大部分情况下,使用的是 Explain 来分析 SQL 语句是否走索引,即便语法分析的时候是走了索引的,执行的时候,还是有可能没有走索引...在执行 SQL 的的时候,对 SQL 的执行代价会有个判断,如果走索引的代价,超过不走索引,那它就放弃使用索引,也就是我们执行 SQL 时,所遇到的 explain 分析走索引,真正线上执行没有走索引的原因...= 等非判断,是不走索引的,其实是不严谨的,或者说是错误的,真正的原因与这里说的 “执行代价分析”都是一回事。
01 SQL SQL,脚本查询语言,处理代码的顺序不是按照脚本语言的顺序,这点是不同于其他编程语言的最明显特征。...SQL语言常见的比如,Mysql,HiveQL,Oracle等,虽然语法上存在一些差异,但它们在解释查询脚本上,尤其是在解析语句执行顺序上具有共性。...如果将脚本语言分解为一系列的语句,那么这些语句的先后执行顺序是怎样的呢? 这篇文章,主要总结SQL语句的执行顺序。...02 Select语句执行顺序 select查询语句的执行顺序,可以看出首先执行FROM子句,最后执行ORDER BY 执行顺序: (1) FROM (2) ON (3) JOIN (4) WHERE...FROM:对FROM子句中的前两个表执行笛卡尔积(交叉联接),生成虚拟表VT1,选择相对小的表做基础表。 ON:对VT1应用ON筛选器,只有那些使为真才被插入到VT2。
接下来,通过一条sql语句的执行来深入了解MySQL各个组件功能以及其作用。...一、SQL语句的执行流程 1、连接MySQL 通常我们会编写sql语句通过某个客户端来执行并且接受执行结果,比如命令行、JDBC、navicat。...3、解析SQL语句 在经过缓存后,就由「解析器」开始工作了,解析器的目的是检查sql语句是否正确以及将sql语句解析成MySQL能够理解的结构,也就是sql语法树。...5、执行SQL语句 经过「优化器」后最终生成一个最优的执行计划交给「执行器」来执行,执行器通过调用「存储引擎」的接口来获取数据。 这里先不展开执行器与存储引擎的交互,后面的文章会详细阐述一下。...一条查询SQL语句的执行流程: 客户端通过连接器连接MySQL服务。 连接成功后向SQL接口发送SQL语句请求。
开启慢查询日志 mysql> set global slow_query_log=1; mysql> set global slow_query_log=’ON’ 注:打开日志记录 定义时间SQL查询的超时时间...mysql> set global long_query_time = 0.005; 查看慢查询日志的保存路径 mysql> show variables like ‘slow%’; mysql...> show global variables like ‘slow_query_log_file’; 查看慢查询 cat /var/log/mysql/slow.log 发布者:全栈程序员栈长,转载请注明出处
第二步:查询缓存 当获取连接后,一条SELECT语句会先去查询缓存,看之前是否执行过。如果获取到缓存后就执行返回,不然继续后面的步骤。...大多数时候不建议使用缓存,因为只要一个表更新,这个表上的所有缓存数据就会被清空了。对于那些经常更新的表来说,缓存命中率很低。MYSQL8版本直接将查询缓存的整块功能删掉了。...第三步:分析器 分析器首先会做“词法分析”,MYSQL会识别出SQL语句里面的字符串是什么以及代表什么。接下来就是“语法分析器”,分析SQL的语法问题。...第四步:优化器 优化器会对SQL的执行顺序,使用哪个索引进行优化。确定SQL的执行方案。 第五步:执行器 执行器执行SQL语句会对权限进行校验,如果有权限,就打开表继续执行。...打开表的时候,执行器就会根据表的引擎定义,去使用这个引擎提供的接口。 图片 一条update语句执行流程 update语句除了会执行上面的五步,还会涉及两个重要的日志模块。
主要是讲解一下sql执行这一块的代码。...语句,只做执行使用 */ private String sql; private String description; /** * 数据库类型 * 1:...(包含要执行的sql语句),然后通过databaseType字段值判断是mysql数据库还是oracle数据库。...然后通过正则表达式去判断要执行的语句类型,如果是select则返回查询结果,是其他操作则返回操作状态。..."; }else { return "执行失败,请检查sql语句"; }
查询各阶段执行进度 (1)开启收集与统计汇总执行阶段信息的功能 update performance_schema.setup_instruments set enabled='yes', timed...stage/%'; update performance_schema.setup_consumers set enabled='yes' where name like '%stage%'; (2)确定执行的...SQL所属的thread_id select sys.ps_thread_id(connection_id()); (3)查询各阶段的执行进度 -- 当前 SELECT stmt.SQL_TEXT...AS sql_text, stage.EVENT_NAME, CONCAT(WORK_COMPLETED, '/', WORK_ESTIMATED) AS progress, (stage.TIMER_END...查询SQL语句的整体执行进度 SELECT * FROM sys.session WHERE THREAD_ID = CONNECTION_ID() AND command = 'Query' AND
请认真看完此文章,对你的sql一定会有很大的提升! ql和mysql执行顺序,发现内部机制是一样的。最大区别是在别名的引用上。...一、sql执行顺序 (1)from (3) join (2) on (4) where (5)group by(开始使用select中的别名,后面的语句中都可以使用) (6) avg,sum...二、mysql的执行顺序 SELECT语句定义 一个完成的SELECT语句包含可选的几个子句。...就跳过 对比了一下,mysql和sql执行顺序基本是一样的, 标准顺序的 SQL 语句为: select 考生姓名, max(总成绩) as max总成绩 from tb_Grade where...考生姓名 is not null group by 考生姓名 having max(总成绩) > 600 order by max总成绩 在上面的示例中 SQL 语句的执行顺序如下:
领取专属 10元无门槛券
手把手带您无忧上云