本章节小傅哥会带着大家初始化一个空的数据库表，并向数据库表中写入100万数据。之后在分别不使用连接池和使用不同的连接池(c3p0、dbcp、druid、hikari)写入数据，测试各个连接池的性能。...这也能让大家知道，日常我们应该选择哪个连接池。 二、环境配置 因为本章节很偏实操，所以需要大家做下提前安装好 Docker 环境，以便于执行本章节工程中的脚本和代码。...执行完脚本，你可以得到一份安装好的 MySQL 8.0 并安装了数据库表。...另外一份是用于压测使用的 ApacheBench 连接 MySQL 的工具，推荐使用开源免费的 Sequel Ace 三、工程说明 在 xfg-dev-tech-connection-pool 工程中提供了不同连接池的配置和一些非常常用的...那么越执行越慢，最后拖垮数据库。甚至可能1天都执行不完。 有索引-区分度不高；几乎是一样的，如果你批量的对一个用户的所有数据都更新，也会锁很多记录。
聚合查询 1 聚合函数 主要对于行与行之间的操作 聚合函数的作用是对一组数据进行计算，通常返回一个单一的结果。它们常用于数据汇总、统计和分析。...显示平均工资大于10000的角色和它的平均工资 联合查询 实际开发中往往数据来自不同的表，所以需要多表联合查询。多表查询是对多张表的数据取笛卡尔积 啥是笛卡尔积？...很明显来自 student表和score表 接着对俩张表进行笛卡尔积 select * from student,score; 这些数据是全部排列组合的结果，并不是我们全部想要的； 缩小范围 加上条件...外连接分为左外连接和右外连接。...join 表名2 on 连接条件; 内连接： 左外连接： 右外连接： 俩张表存在一一对应的情况 ，所有内连接和外连接找到的结果都是一致的； 当修改其中某个值，让它们不保存一一对应的情况
外连接： 左连接（左外连接Left Join）：以左表作为基准进行查询，左表数据会全部显示出来，右表如果和左表匹配的数据则显示相应字段的数据，如果不匹配则显示为 null。...右连接（右外连接 Right Join）：以右表作为基准进行查询，右表数据会全部显示出来，左表如果和右表匹配的数据则显示相应字段的数据，如果不匹配则显示为 null。...相关SQL及解释： 关于左连接和右连接总结性的一句话：左连接where只影响右表，右连接where只影响左表。...SQL Select 语句完整的执行顺序： 1、from 子句组装来自不同数据源的数据； 2、where 子句基于指定的条件对记录行进行筛选； 3、group by 子句将数据划分为多个分组； 4...sum()：返回指定数据的和，只能用于数字列，空值忽略。 f. group by()：对数据进行分组，对执行完 group by 之后的组进行聚合函数的运算，计算每一组的值。
一、SQL 的 select 语句完整的执行顺序： 1、from 子句组装来自不同数据源的数据; 2、where 子句基于指定的条件对记录行进行筛选; 3、group by 子句将数据划分为多个分组;...如果 FROM 子句包含两个以上的表,则对上一个联接生成的结果表和下一个表重复执行步骤 1 到步骤 3,直到处理完所有的表位置。...group by()：对数据进行分组,对执行完 group by 之后的组进行聚合函数的运算,计算每一组的值。...三、SQL 之连接查询(左连接和右连接的区别) 外连接： 左连接(左外连接):以左表作为基准进行查询，左表数据会全部显示出来,右表如果和左表匹配的数据则显示相应字段的数据,如果不匹配则显示为 null。...右连接(右外连接):以右表作为基准进行查询，右表数据会全部显示出来,左表如果和右表匹配的数据则显示相应字段的数据,如果不匹配则显示为 null。 全连接:先以左表进行左外连接,再以右表进行右外连接。
1、聚合函数的介绍 聚合函数又叫组函数，通常是对表中的数据进行统计和计算，一般结合分组（group by）来使用，用于统计和计算分组数据 常用的聚合函数: count(col): 表示求指定列的总行数...; 4、group by + 聚合函数的使用 -- 统计不同性别的人的平均年龄 select gender,avg(age) from students group by gender; -- 统计不同性别的人的个数...rollup在最后记录后面新增一行，显示select查询时聚合函数的统计和计算结果 连接查询 - 内连接 1、连接查询的介绍 连接查询可以实现多个表的查询，当查询的字段数据来自不同的表就可以使用连接查询来完成...“交集” 连接查询 - 左连接 1、左连接查询 以左表为主根据条件查询右表数据，如果根据条件查询右表数据不存在使用null值填充 左连接查询效果图: 左连接查询语法格式: select 字段 from...连接查询 - 自连接 1、自连接查询 左表和右表是同一个表，根据连接查询条件查询两个表中的数据。
分别测试4中连接池（DBCP、C3P0、Druid、Hikari）的表现情况。...] ms 2.5 汇总 测试次数 C3P0 DBCP Druid Hikari 第一次 26.3s 24.9s 31.3s 27.3s 第二次 27.7s 26.8s 23.3s 26.6s 结论：不同的数据库连接池...Druid Hikari 第一次 4.9ms 2.7ms 2.6ms 3.6ms 第二次 3.2ms 1.7ms 2.3ms 3.1ms 第三次 4.2ms 2.1ms 2.1ms 2.9ms 结论，4种连接池对单次查询的效率影响不大...需要注意的是，上述的测试每次都是测试的不同数据，以避免mysql数据库的缓存。...，这条数据的性能在走缓存之后， 查询效率是最高的，通过这种方式来对4种连接池进行负载测试，测试结果的差异，就大致可以认为是4种连接池的差异了。
在实际应用中，ROLLBACK是确保在事务执行中发生错误时维护数据库的一致性和完整性的重要工具。 三、高级查询 3.1 聚合函数 聚合函数是SQL中的高级查询工具，用于对结果集执行计算，并返回单个值。...HAVING子句允许在聚合函数的基础上进行进一步的筛选，对于复杂的数据分析和报告生成非常有用。 3.3 连接查询 连接查询是在多个表中检索相关数据的一种常见查询操作。...SQL提供了不同类型的连接，包括内连接（INNER JOIN）、左连接（LEFT JOIN或LEFT OUTER JOIN）、右连接（RIGHT JOIN或RIGHT OUTER JOIN）和全连接（FULL...（LEFT JOIN） 左连接返回左表中所有行，以及右表中与左表中匹配行的交集。...连接查询是处理多表关联数据的重要工具，允许在一个查询中检索并组合来自不同表的信息。 3.4 子查询 子查询是指在查询中嵌套使用的查询语句。
GROUP BY 子句 使用group by 对表中的行进行分组 不用group by分组的时候，相当于只有一组。引入group by就可以针对不同的组来分别进行聚合。...联合查询（多表查询） 实际开发中往往数据来自不同的表，所以需要多表联合查询。多表查询是对多张表的数据取笛卡尔积： 笛卡尔积是通过排列组合来的。 笛卡尔积得到一个更大的表。...别名2 where 连接条件 and 其他条件; 外连接语法： -- 左外连接，表1完全显示 select 字段名 from 表名1 left join 表名2 on 连接条件; -- 右外连接，表2完全显示...但是如果表不是一一对应，内连接和外连接就有区别了。 左外连接：会把左表的结果尽量列出来，哪怕在右表中没有对应的记录，就使用NULL填充。...同理，右表连接，会把右表的结果尽量列出来，哪怕左表中没有对应的李璐，就使用NULL来填充。 自连接 自连接就是自己和自己进行笛卡尔积。 子查询 子查询本质上就是套娃。
多表查询是指从一个以上的表中检索数据并将其组合以满足特定需求的操作。通过多表查询，您可以执行以下操作： 检索与多个表关联的数据。 在多个表之间建立关联，以便于数据分析。 聚合和计算多个表中的数据。...更新和删除多个表中的数据。 多表查询通常涉及使用 JOIN 子句将不同的表连接在一起，以创建一个包含所需数据的结果集。 多表查询的基本语法 在 MySQL 中，使用 JOIN 子句来执行多表查询。...JOIN 子句用于将两个或多个表中的行组合在一起，以创建一个包含来自这些表的数据的结果集。...SET products.price = orders.price; 在这个示例中，我们首先将订单表和产品表连接在一起，然后使用两个 UPDATE 语句分别更新订单表和产品表中的价格。...总结 MySQL 多表查询是处理关系型数据库中复杂数据需求的重要工具。通过了解不同类型的 JOIN 操作以及如何编写多表查询语句，您可以执行各种复杂的数据操作，包括数据检索、聚合、更新和删除。
计算每个岗位的平均工资,刨除张三,也刨除平均工资超过2000的数据. 2.2 联合查询 实际开发中往往数据来自不同的表，所以需要多表联合查询。...多表查询是对多张表的数据取笛卡尔积： 首先初始化测试数据; 2.2.1 内连接 语法; select 字段 from 表1 别名1 [inner] join 表2 别名2 on 连接条件 and 其他条件...笛卡尔积就是单纯的排列组合,会产生有许多的无效数据.指定连接条件,把无效数据去掉. 2.2.2 外连接 外连接分为左外连接和右外连接。...如果联合查询，左侧的表完全显示我们就说是左外连接；右侧的表完 全显示我们就说是右外连接。...子查询 子查询是指嵌入在其他sql语句中的select语句，也叫嵌套查询 多行子查询：返回多行记录的子查询 IN 关键字 2.2.5 合并查询 union 允许从不同的多个表分别查询,只要求每个表查询的结果集合列的类型和个数匹配即可
第二部分，对insert和update进行测试： 1 环境准备 分别准备了Insert和Update两种场景，其中，对于Update场景，还准备了通过索引更新和不走索引更新两种情况。...但是经过验证，全表扫描耗时特别长，大概5秒左右。因此通过全表扫描的方法来进行负载测试的话已经没有意义。...update性能是最好的，DBCP的随机UPDATE性能最差。...因此也可以理解为什么springboot中缺省的连接池是Hikari。...DBCP 目前看来这个连接池在三个维度上对比都居于劣势，不知道还有没有其他优势场景没有测到。
表的设计 在数据库设计中，表之间的关系是至关重要的。MySQL支持一对一、一对多和多对多的关系。 一对一 每个记录只对应另一个表中的一条记录。...聚合函数(列名)：用于执行分组后的聚合计算（如COUNT()、SUM()、AVG()等）。 WHERE：过滤数据，通常在GROUP BY之前使用，来限制参与分组的数据。...它与WHERE不同，WHERE用于对原始数据进行筛选，而HAVING用于对分组后的结果进行筛选。...FROM 表1，表2 where 表1.列名 = 表2.列名; 6.2 左连接（LEFT JOIN） 左连接（也叫左外连接）返回左表中的所有记录，以及右表中匹配的记录。...FROM 表1 LEFT JOIN 表2 ON 表1.列名 = 表2.列名; 6.3 右连接（RIGHT JOIN） 右连接（也叫右外连接）与左连接类似，不同之处在于它返回右表中的所有记录，以及左表中匹配的记录
该SQL的MapReduce的计算过程，按MapReduce编程模型 map函数的输入K和V，主要看V V就是左表中每行的数据，如 map函数的输出就是以输入的V作为K，V统一设为...Hive join操作 除简单的聚合（group by）、过滤（where），Hive还能执行连接（join on）。...= u.userid); 该SQL命令也能转化为MapReduce计算，连接过程： join的MapReduce计算过程和group by稍不同，因为join涉及两张表，来自两个文件（夹），所以要在...shuffle后，相同Key被输入到同一reduce函数，就可根据表的标记对Value数据求笛卡尔积，用第一张表的每条记录和第二张表的每条记录连接，输出即join结果。...所以打开Hive源码，看join代码，会看到一个两层for循环，对来自两张表的记录进行连接操作。
上篇介绍SQL的语法顺序和执行顺序的区别并仔细剖析SQL的执行顺序；中篇详细介绍条件子句、分组查询和排序的细节；下篇会介绍表的连接和其他常用关键字。...然后我们用group by和max(score)聚合函数实现了对课程进行分层，求出每门课的最高成绩，为了对聚合之后的结果作限制，我们用having子句只展示最高分数大于等于70的记录。...这和excel中的数据透视表一致。 2. 聚合函数 ? 聚合函数 3. having子句 和where子句一致，只需注意是对聚合后的结果作限制。...内连接结果 3.左连接与右连接 一般情况下，“A表左连接B表”的结果与“B表右连接A表”的结果相同，为了保证SQL代码的易阅读性，一般用左连接即可。...左连接指的是将左表作为基准表，保留表中的所有行，将右表根据某个字段进行等值匹配，如果找不到右表中匹配的行则显示为NULL。结果如下： ?
多对多：一个学生可以选多门课，一门课可以被多个学生选 学生表和课程表是多对多的关系，这里通过课程表(关系表)关联 三....： 1.实际开发中往往数据来自不同的表，所以需要多表联合查询。...3.外连接： 外连接分为左外连接和右外连接。...如果联合查询，左侧的表完全显示我们就说是左外连接；右侧的表完 全显示我们就说是右外连接 语法： -- 左外连接，表1完全显示 select 字段名 from 表名1 left join 表名...IN关键字 例子：在成绩表中查询彩儿和清涟同学的成绩的成绩信息 6.合并查询： 在实际应用中，为了合并多个select的执行结果，可以使用集合操作符 union，union all
默认的OUTER关键字可以省略不写。在使用ALL修饰符对JOIN进行修饰时，如果右表中存在多个与左表关联的数据，那么系统则将右表中所有可以与左表关联的数据全部返回在结果中。...这与SQL标准的JOIN行为相同。在使用ANY修饰符对JOIN进行修饰时，如果右表中存在多个与左表关联的数据，那么系统仅返回第一个与左表匹配的结果。...如果左表与右表一一对应，不存在多余的行时，ANY与ALL的结果相同。可以在会话中通过设置join_default_strictness来指定默认的JOIN修饰符。...USING中指定的列必须在两个子查询中具有相同的名称，而其他列必须具有不同的名称。可以通过使用别名的方式来更改子查询中的列名。USING子句使用的是等值连接。右表（子查询的结果）将会保存在内存中。...HAVING子句HAVING子句可以用来过滤GROUP BY之后的数据，类似于WHERE子句。WHERE与HAVING不同之处在于WHERE在聚合前(GROUP BY)执行，HAVING在聚合后执行。
limit：限定返回结果条数 这是一条SQL查询语句中所能涉及的主要关键字，经过解析器和优化器之后，最后的执行过程则又与之差别很大，执行顺序如下： from：首先找到待查询的表 join on：如果目标数据表不止一个...right, # 右表 how: str = "inner", # 默认连接方式：inner on=None, # SQL中on连接一段，要求左表和右表中 公共字段 left_on...=None, # 设置左表连接字段 right_on=None, # 设置右表连接字段 left_index: bool = False, # 利用左表索引作为连接字段 right_index...where关键字的，不过遗憾的是Pandas中的where和Numpy中的where一样，都是用于对所有列的所有元素执行相同的逻辑判断，可定制性较差。...group by关键字用于分组聚合，实际上包括了分组和聚合两个阶段，由于这一操作属于比较规范化的操作，所以Pandas和Spark中也都提供了同名关键字，不同的是group by之后所接的操作算子不尽相同
3，外连接 3.1左连接和右连接语法 示例分析 3.2左连接和右连接的区别 3.3on和where的区别 4，自连接 示例 5，子查询 示例 6，合并查询 (1)union的使用 (2)union all...3，外连接 外连接包括内连接和其他至少⼀张表的所有满足条件的信息，外连接包括： 左（外）连接 右（外）连接 其中左连接查询的内容如下图红色部分 右连接如下图红色部分 3.1左连接和右连接语法...3.2左连接和右连接的区别 left join （左连接）：返回包括左表中的所有记录和右表中连接字段相等的记录。...right join （右连接）：返回包括右表中的所有记录和左表中连接字段相等的记录。...因此on只进行连接操作，where只过滤中间表的记录 （1）内连接的on可以省略，而外连接的不能省略 （2）on在内连接和外连接的执行效果不同 （3）在外连接中on和where不同 在外连接中若是有多个查询条件
DQL的主要任务是从数据库中选择数据，这通常涉及以下操作： 选择数据：选择需要检索的表和列。 过滤数据：定义条件，以筛选出符合条件的数据。 排序数据：按照指定的列对结果进行排序。...组合数据 - 使用JOIN子句 JOIN子句用于将来自不同表的数据组合在一起。它通常在多个表之间共享关联列时使用。...以下是一些进阶的DQL查询主题： 1. 分组和聚合：使用GROUP BY子句对数据进行分组，并使用聚合函数对每个组的数据进行计算。...连接：连接允许您将多个表中的数据组合在一起。除了基本的内连接之外，还有左连接、右连接和全连接等不同类型的连接。...子查询中的连接：将连接用于子查询，以在嵌套查询中使用多个表。
avg(score) >= 60 注意，这里的having筛选与EXCEL透视表的筛选并不是一个功能，having是对聚合值的筛选，EXCEL透视表的筛选是对字段的值的筛选，这与SQL中的where...：基于连接条件，左表数据作为标准，右表也存在的数据将与左表显示在同一行，否则将使用空值填充； 右连接：基于连接条件，右表数据作为标准，左表也存在的数据将与右表显示在同一行，否则将使用空值填充； 内连接和全连接是两个极端...，内连接是两者均有才会返回，全连接是不管两者有没有，所有数据都要返回，存在匹配成功就放在同一行的形式； 左连接和右连接看起来有一者是多余的，因为我们可以使用左连接和右连接中的任意一个，同时通过调整表查询的顺序来实现左...因为在SQL的查询机制中，前面的表(左表)较小时，查询的效率更高；由于这个潜规则，我们放置数据表的顺序被限制后，才需要这两个不同的连接来实现不同的左、右连接的功能。...，这个时候需要进行表连接，根据之前介绍的不同连接方式的区别即可选择对应表链接方式； 如果业务更复杂一些，比如需要计算移动平均值，分组排序，以及同时想看明细和聚合值得情况下，就需要用到强大的窗口函数了。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
腾讯会议
云直播
