首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

MySQL中10多张关联要做优化,怎么理解逻辑幂等

最近优化了一条MySQL的慢查询SQL,还是蛮有感触,小结一下。...那就是里面有一个明显全扫描的逻辑,也就意味着尽管这么多表关联,但是数据量也可以接受,在优化器解析时大部分逻辑是走了索引,优化好最后一个全扫描,整个问题就迎刃而解了。...,然后和外部的使用prod_id进行关联,为了体现出是left join(左连接),我把product的位置及往上放了放。...整个逻辑其实从上面的图看起来还是有点别扭,tag_product的数据还得反向和外部的进行关联。...所以整个tag和tag_product的关联可以降维为普通的关联,而非left join. 整个改进的逻辑如下图所示: ?

3.6K10
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    flink维关联系列之Mysql关联:全量加载

    关联系列目录: 一、维服务与Flink异步IO 二、Mysql关联:全量加载 三、Hbase维关联:LRU策略 四、Redis维关联:实时查询 五、kafka维关联:广播方式 六、自定义异步查询...在维关联中定时全量加载是针对维数据量较少并且业务对维数据变化的敏感程度较低的情况下可采取的一种策略,对于这种方案使用有几点需要注意: 全量加载有可能会比较耗时,所以必须是一个异步加载过程 内存维数据需要被流数据关联读取...中,这是一个典型的流关联过程,需要从mysql中获取该广告位id对应的广告主id, 然后在来统计。...接下来看维关联的实现代码: class SideFlatMapFunction extends RichFlatMapFunction[AdData, AdData] { private var...,给用户发出警告 维全量加载是在每个task里面执行,那么就会导致每个task里面都有一份全量的维数据,可采取优化方式是在维关联前根据关联字段做keyBy操作,那么就会根据关联字段hash然后对并行度取余得到相同的值就会被分配到同一个

    2.3K20

    MYSQL 数据库归档归档设计

    下面就是一个MYSQL 针对一个数据库归档的案例(这个案例也是有缺陷的,但目前是秉承着够用就好,以及时间成本的原则) 首先设计一个归档要考虑的问题如下 1 归档的大小,以及每日最大,或最小的归档数据量...3 归档的方法,自己定义数据的归档方面,可以每次归档将数据灌入一个,也可以定期的将数据写入不同的归档,例如已归档日期和后缀的方式来将每次写入的数据进行分割,或者建立分区的方式来进行归档。...以下以最简单的自动化的方案来讲 下图是基于案例来讲的 因为数据库是MYSQL 所以考虑了归档一次是多大的批量,避免归档数据量过大的时候将生产库hang 死,另外配置主要的功能是有两个 1 限制一次拷贝和清理的数据量...配置 ? 归档日志 ?...这样归档有没有缺点,当然有,缺点马上就可以说出几个 1 为什么还要在本地机归档数据,不应该是传送到其他机器上吗 2 为什么不设置每次归档的数量限制(每次限制操作的行数),这对MYSQL不是很用吗,为什么要写死

    5K41

    mysqlA驱动大B在内关联时候,怎么写sql?那么左关联呢?右关联有怎么写?

    一:mysqlA驱动大B在内关联时候,怎么写sql在MySQL中,可以使用INNER JOIN语句来内关联两个。如果要将小A驱动大B进行内关联,可以将小A放在前面,大B放在后面。...和大B的名,column1、column2、column3、column4分别代表需要查询的列名,columnX和columnY是用于内关联的列。...二:mysqlA驱动大B在右关联时候,怎么写sql?左关联怎么写?在MySQL中,通过RIGHT JOIN(右连接)可以将小A驱动大B的连接操作。...三:mysql执行sql顺序 是从左到右还是从右到左?在MySQL中,SQL语句的执行顺序是从上到下,从左到右的顺序。具体来说,MySQL首先会解析FROM子句,然后根据JOIN条件连接相关的。...在连接完成后,MySQL会根据WHERE子句的条件进行筛选,仅返回符合条件的行。接下来,MySQL会执行SELECT语句,选择需要返回的列。最后,MySQL会根据ORDER BY子句对结果进行排序。

    24710

    Mybatid关联查询

    一、一对一关联  1.1、提出需求   根据班级id查询班级信息(带老师的信息) 1.2、创建和数据   创建一张教师表和班级,这里我们假设一个老师只负责教一个班,那么老师和班级之间的关系就是一种一对一的关系...  MyBatis中使用association标签来解决一对一的关联查询,association标签可用的属性如下: property:对象属性的名称 javaType:对象属性的类型 column:...所对应的外键字段名称 select:使用另一个查询封装的结果 二、一对多关联 2.1、提出需求   根据classId查询对应的班级信息,包括学生,老师 2.2、创建和数据   在上面的一对一关联查询演示中...Student [id=3, name=student_C]]] 41 System.out.println(clazz); 42 } 43 }  2.6、MyBatis一对多关联查询总结...  MyBatis中使用collection标签来解决一对多的关联查询,ofType属性指定集合中元素的对象类型。

    3.3K70

    MySQL关联查询时,我们为什么建议小驱动大

    作者:留兰香丶 blog.csdn.net/codejas/article/details/78632883 有的时候我们在操作数据库时会将两个或多个数据关联起来通过一些条件筛选数据,在关联时我们要遵循一些原则...我建立了两张,一张员工,一张部门,员工中有部门id 这个属性,将这两张关联起来。...EXISTS 子查询只返回TRUE 或 FALSE ,因此子查询中的SELECT * 可以是SELECT 1 或者其他,MySql 的官方说在实际执行时会忽略SELECT 清单,因此是没有 什么区别的。...EXISTS 子查询其实在执行时,MySql 已经对它做了一些优化并不是对每条数据进行对比。 二、总结 在实际操作过程中我们要对两张的dept_id 都设置索引。...在一开始我们就讲了一个优化原则即:小驱动大,在我们使用IN 进行关联查询时,通过上面IN 操作的执行顺序,我们是先查询部门再根据部门查出来的id 信息查询员工信息。

    5.1K22
    领券