一、前言 前几天在小小明大佬的Python交流群中遇到一个粉丝问了一个使用Python实现Excel中查询在一个月内出现的重复订单问题，觉得还挺有用的，这里拿出来跟大家一起分享下。...其实思路就是：新增一列年月的列，然后判断重复。...二、实现过程 这里有个大佬给了一个Excel实现的方法，如下： =name&code&text(enter_time,"yyyymm") 然后对这列countif计数找>1的或者条件格式高亮重复项。...这篇文章主要盘点了一个Python实现Excel中筛选数据的问题，文中针对该问题，给出了具体的解析和代码实现，帮助粉丝顺利解决了问题。...最后感谢粉丝提问，感谢大佬们给出的思路和代码解析，感谢【皮皮】等人参与学习交流。
一、背景 1.1 传统Mybatis的弊端 1.1.1 场景描述 假设有两张表：一张商品表、一张订单表，具体表的字段如下： 现有如下需求： 分别根据id查询商品表和订单表所有信息 根据支付状态和通知状态查询订单表信息...需求a：对于不同的实体类，即使查询的目的一致，仍然需要重复构造类似的sql语句，仅仅是表字段和表信息不同。...(Wapper queryWrapper)方法直接构造查询条件，例如查询支付状态为2和通知状态为1的订单信息 orderMapper.selectList(new QueryWrapper...：可输出 Sql 语句以及其执行时间，建议开发测试时启用该功能，能快速揪出慢查询； 内置全局拦截插件：提供全表 delete 、 update 操作智能分析阻断，也可自定义拦截规则，预防误操作。...7.2 Mybatis-plus的ORM的核心思想 1）实体类和数据库表通过自定义注解来完成一一映射。 2）对象属性和字段同样使用注解来一一对应（命名注意要相同）。
具体来说，我们可以采用以下技术： 普通索引 在一些搜索列或者排序列被频繁使用的时候，应该为其创建一个普通索引来加快查询速度。...例如，在订单列表页面中，按照订单日期进行排序时，则应该为订单建立一个普通索引。 唯一索引 当某个列数据存在唯一性约束时，就需要创建唯一索引，避免出现重复或者不符合业务规则的数据。...一般来说，唯一索引比普通索引的查询速度更快。例如，在用户表中，用户名应该采用唯一索引保证用户不会重复。 组合索引 当一个查询涉及多个条件筛选时，可以为涉及的多个条件创建组合索引。...组合索引可较好地避免重复扫描不必要的数据，提高查询效率。这种方式的实现原理是让数据库系统从左向右扫描它们，从而将查询结果集减少到最小，并提高其执行速度。...例如，在订单表中以时间和产品 ID 作为条件查询订单状态时，可以使用组合索引来保证快速定位出符合条件的数据。 在项目中我们也会根据实际需求来决定哪些字段使用索引、哪些字段不用。
与包含实际数据的物理表不同，视图并不存储数据，而是基于一个或多个基础表的定义来显示数据。视图可以简化复杂的查询操作，提供数据抽象，以及增强安全性等。...，你可以通过查询这个视图来获取每个用户的总订单金额，而不需要每次都写复杂的聚合查询。...view_name：视图的名称。column_name：视图列的名称，可以自定义，也可以省略，省略时使用 SELECT 子句中列的名称。...COMMENT column_comment：为视图的列添加注释。SELECT ...：定义视图的查询语句。...如果需要修改视图，通常的做法是先删除旧视图，然后重新创建新的视图。
若是一对多查询时，若是使用内连接查询，则很可能出现查询出的字段有重复。使用双重for循环嵌套处理即可。...-- id：指定查询列中的唯 一标识，订单信息的中的唯 一标识，如果有多个列组成唯一标识，配置多个id column：订单信息的唯 一标识 列 property...-- id：指定查询列中的唯 一标识，订单信息的中的唯 一标识，如果有多个列组成唯一标识，配置多个id column：订单信息的唯 一标识 列 property...，比如订单表和订单明细表即为一对多连接，若是不对sql语句进行处理，由于一个订单对应多条订单明细，因此查询出的结果对于订单表数据来说将会出现重复 resultMap的处理方式为在订单表数据的pojo中添加一个...，虽然一条订单信息对应多条订单明细，由于将多条信息明细存储到了list中，因此查询后将不再出现重复数据，达到了去重的效果 今天文章到此就结束了，感谢您的阅读，Java架构师必看祝您升职加薪，年年好运。
有个业务主要逻辑就是新增订单、修改订单、查询订单等操作。...然后因为订单是不能重复的，所以当时在新增订单的时候做了幂等性校验，做法就是在新增订单记录之前，先通过 select ... for update 语句查询订单是否存在，如果不存在才插入订单记录。...如果没有使用 select ... for update 语句，而使用了单纯的 select 语句，如果是两个订单号一样的请求同时进来，就会出现两个重复的订单，有可能出现幻读，如下图： 为什么会产生死锁...可重复读隔离级别下，是存在幻读的问题。 Innodb 引擎为了解决「可重复读」隔离级别下的幻读问题，就引出了 next-key 锁，它是记录锁和间隙锁的组合。...我们可以回归业务的角度来预防死锁，对订单做幂等性校验的目的是为了保证不会出现重复的订单，那我们可以直接将 order_no 字段设置为唯一索引列，利用它的唯一下来保证订单表不会出现重复的订单，不过有一点不好的地方就是在我们插入一个已经存在的订单记录时就会抛出异常
11.2 包含或取消重复的行 union (all) 两行 union 分开的语句可能会返回重复的行，但前面那个例子实际结果却并没有包含重复行，这是因为 union 关键字自动去除了重复的行，如果不希望去重...当你使用 insert 语句插入一个新的值，后续自动增量将从这个值重新开始增加。...视图 视图是虚拟存在的表，行和列的数据来自定义视图的查询中使用的表，并且是在使用视图时动态生成的，只保存 SQL 逻辑，不保存查询结果。...，重新写一遍查询语句似乎有点重复。...orders 表时出现故障，回退； 检索 orders 表中赋予的新订单 ID； 对于订购的每项物品，添加新行到 orderitems 表； 如果在添加新行到 orderitems 时出现故障，回退所有添加的
insert 语句是怎么加锁的？ 提纲如下： 正文 有个业务主要逻辑就是新增订单、修改订单、查询订单等操作。...然后因为订单是不能重复的，所以当时在新增订单的时候做了幂等性校验，做法就是在新增订单记录之前，先通过 select ... for update 语句查询订单是否存在，如果不存在才插入订单记录。...如果没有使用 select ... for update 语句，而使用了单纯的 select 语句，如果是两个订单号一样的请求同时进来，就会出现两个重复的订单，有可能出现幻读，如下图： 为什么会产生死锁...如果唯一二级索引列重复： 不论是哪个隔离级别，插入新记录的事务都会给已存在的二级索引列值重复的二级索引记录添加 S 型 next-key 锁。...我们可以回归业务的角度来预防死锁，对订单做幂等性校验的目的是为了保证不会出现重复的订单，那我们可以直接将 order_no 字段设置为唯一索引列，利用它的唯一下来保证订单表不会出现重复的订单，不过有一点不好的地方就是在我们插入一个已经存在的订单记录时就会抛出异常
需求： 查询出每月 order_amount（订单金额） 排行前3的记录。 例如对于2019-02，查询结果中就应该是这3条： ?...解决方法 MySQL 5.7 和 MySQL 8.0 有不同的处理方法。 1. MySQL 5.7 我们先写一个查询语句。...根据 order_date 中的年、月，和order_amount进行降序排列。 然后，添加一个新列：order_amount（本条记录在本月中的名次）。 ? 执行结果： ?...可以看到，根据年、月、订单金额排序了，还多了一列order_rank，显示出了本条记录在本月的订单金额排名情况。 上面SQL中比较个性的是这部分： ?...@current_month和@order_rank 是我们自定义的变量。 使用 := 可以动态创建一个变量，而不需要使用 set 命令。 ?
主键约束的特点十分显著，它的唯一性保证了表中不会出现重复的记录，这对于数据的准确性和完整性至关重要。在订单表中，如果订单编号设置为主键，就可以避免出现重复的订单编号，确保每个订单都有唯一的标识。...这一约束机制通过在数据库层面进行严格的检查，当有新数据插入或现有数据更新时，数据库会自动验证相关列的值是否与已存在的值重复。若存在重复值，操作将被拒绝，以此保证数据的唯一性。...这表示在同一个订单中，同一种商品只能出现一次，防止了重复记录的插入，保证了订单详情数据的准确性和一致性。...唯一约束防止表中特定列或列组合出现重复值，保证了数据的独特性，提高了数据的质量和可靠性，减少了数据冗余和错误。...检查约束通过定义布尔表达式，限制列值满足特定条件，确保了数据的合法性和有效性，避免了不合理数据的插入，增强了数据的准确性和合规性。
SUM(order_amount)部分是对原始数据中相同年份的订单金额进行求和。2. 自定义SQL语句除了使用PIVOT函数外，还可以使用自定义的SQL语句实现行转列操作。...，而每月的销售额则被转换成新的列。...自定义SQL语句除了使用UNPIVOT函数外，还可以使用自定义的SQL语句实现列转行操作。这种方法需要使用到MySQL的UNION ALL语句。...在每个子查询中，pivot_column部分是列的名称，value_column则是该列的值。例如，假设我们有一个表格记录每月销售额，字段包括年份、月份和销售额。...结论MySQL中的行转列和列转行操作都具有广泛的应用场景，能够满足各种分析和报表需求。在实际应用中，可以根据具体的需求选择相应的MySQL函数或编写自定义SQL语句进行操作。
唯一索引 唯一索引不允许两行具有相同的索引值。 如果现有数据中存在重复的键值，则大多数数据库都不允许将新创建的唯一索引与表一起保存。当新数据将使表中的键值重复时，数据库也拒绝接受此数据。...3.表中如果建有大量索引将会影响INSERT、UPDATE和DELETE语句的性能，因为在表中的数据更改时，所有的索引都将必须进行适当的调整。...在平台现有下拉参照的查询sql语句中的like条件语句要改成不带前置通配符。...还有需要关注Order By和Group By谓词的索引设计，Order By和Group By的谓词是需要排序的，某些情况下为Order By和Group By的谓词建立索引，会避免查询时的排序动作。...4.对于内容基本重复的列，比如只有1和0，禁止建立索引，因为该索引选择性极差，在特定的情况下会误导优化器做出错误的选择，导致查询速度极大下降。
下面的 SQL 语句强制 "Id_P" 列和 "LastName" 列不接受 NULL 值： CREATE TABLE Persons ( Id_P int NOT NULL, LastName varchar...都重复时才去重两个条件 select distinct pname,price from product; 注意:distinct它的作用是去除重复. 2.9.3.5 使用别名 别名查询.使用的关键字是...例如用户表和用户帐户表 原因二：将经常查询的字段放到一张表中，不经常查询的数据放到一张表中 一对多： 如：类别表和商品表、用户表和订单表 一对多建表原则：在多的一方（从表）中创建外键与一的一方（主表）的主键进行关联...内连接基于连接谓词将两张表(如 A 和 B)的列组合在一起，产生新的结果表。查询会将 A 表的每一行和 B 表的每一行进行比较，并找出满足连接谓词的组合。...7.3 多表查询-子查询 练习: 1.查看用户为张三的订单详情 2.查询出订单的价格大于300的所有用户信息。 3.查询订单价格大于300的订单信息及相关用户的信息。
h.hero 3.在select中将自己编辑的新的数据命名 eg：h.life + h.speed + h.attack as '显示数字的总和') 如图： where：输入筛选目标的代码，显示出来目标行中的指定列...* s.产品_价格 > 1000000 order by 有超过百万订单月 代码结果： 有超过百万订单月 1 2 2 2 3 4 5 5 6 11 12 以上我们发现2月和5月的订单都有重复超过一万的...，则会只删除所有列内容都同时重复的行，比如以下代码： select distinct s.销售订单_日期_月 as '有百万单月', s.销售数量 * s.产品_价格 as '销售额' from...： (4).select子查询 (与where和from子循环一样与，是在select中嵌套sql语句) 大致思路： eg：统计极简文具公司数据库_升级版中无产品_售价1的产品有多少个?...两表连接的代码如下： 使用把极简文具公司数据库中的客户表格和产品表格通过关联列客户_ID关联起来 select c.客户_名称, s.销售订单_日期, s.销售数量 * s.产品_价格
场景一：订单导入，通过交易号避免重复导单 业务逻辑：订单导入时，为了避免重复导单，一般会通过交易号去数据库中查询，判断该订单是否已经存在。...ref : 没有哪个列或者参数和key一起被使用。 Extra : 使用了where查询。 因为数据库中只有三条数据，所以rows和filtered的信息作用不大。...场景二，订单管理页面，通过订单级别和订单录入时间排序 业务逻辑：优先处理订单级别高，录入时间长的订单。...id select 查询的序列号，包含一组可以重复的数字，表示查询中执行sql语句的顺序。...Using index condition：在5.6版本后加入的新特性，优化器会在索引存在的情况下，通过符合RANGE范围的条数 和 总数的比例来选择是使用索引还是进行全表遍历。
它使用客户端直连数据库，以 jar 包形式提供服务，无需额外部署和依赖，可理解为增强版的 JDBC 驱动，完全兼容 JDBC 和各种 ORM 框架。...3.SQL 路由 根据解析上下文匹配用户配置的分片策略，并生成路由路径。目前支持分片路由和广播路由。 4.SQL 改写 将 SQL 改写为在真实数据库中可以正确执行的语句。...4 基因法 & 自定义复合分片算法 分片算法和阿里开源的数据库中间件 cobar 路由算法非常类似的。...图片 看起来分片算法很简单，但我们需要按照订单 ID 查询订单信息时依然需要路由四个分片，效率不高，那么如何优化呢 ？ 答案是：基因法 & 自定义复合分片算法。...只保留最后一条 update ，会执行失败，所以此处需要将 update 转为 insert 语句 ; 4.按新表合并 将最终要提交的 N 条数据，按照新表进行拆分合并，这样可以直接按照新表纬度进行数据库批量操作
resultMap可以实现延迟加载 3.一对多查询 3.1.需求 查询订单及订单明细信息 3.2.sql语句 确定主查询表：从Orders订单表开始查询 关联查询表：订单明细表 直接在Orders订单对象添加包含订单明细的集合即可...-- 定义普通属性查询列和pojo属性名之间的映射关系 --> 重复记录 4.多对多查询 4.1.需求 查询用户及用户购买商品的信息 4.2.sql语句 查询用户表关联查询出商品信息 主表：用户表，从用户表查询 从表:由于用户表和商品表没有直接的关系...完成根据用户id(user_id)用户信息的查询，如果findUserById不在本mapper中需要前边加namespace column：订单信息中关联用户信息查询的列，是user_id 关联查询的...： 3.4.使用生成的代码 需要将生成工程中所生成的代码拷贝到自己的工程中 测试ItemsMapper中的方法 使用example可以进行类似的查询： 查询条件如下所示： //自定义条件查询 @Test
数据库在面试中基本属于必考内容，最多的就是手写SQL或口述SQL，面试官会给你出一个场景，比如班级、分数、课程之类的，一般考察表查询语句居多，例如多表查询、连接查询、子查询等。...语句：select distinct 列名 from 表名; -- 显示此列不重复的数据 count：统计总行数。...count(distinct 列名)：返回指定列的不重复的行数，在统计结果的时候，会忽略列值为NULL的行数（不包括空字符和0），即列值为NULL的行数不统计在内。...因此在写子查询语句时，可以先测试一下内层的子查询语句是否输出了想要的内容，再一层一层往外测试，增加子查询的正确率。...' GROUP BY user_id HAVING SUM(price) > 10; -- 数据表连接查询和子查询练习 -- 1.查询订单表中的价格大于10元的用户的昵称（小提示：用户昵称在用户表中，
正确使用数据库的事务 eg.创建订单时，要同时往订单表和订单商品表中插入数据，那这些插入数据的INSERT必须在一个数据库事务中执行，数据库的事务可以确保：执行这些INSERT语句，共赴生死!...基本功能 创建订单 随着购物流程更新订单状态 查询订单，包括用订单数据生成各种报表 数据表 订单主表：也叫订单表，保存订单的基本信息 订单主表和后面的几个子表都是一对多,关联的外键就是订单主表的主键，...这个订单号也就是订单表的主键，如此这些重复请求中带的都是同一个订单号。订单服务在订单表中插入数据的时候，执行的这些重复INSERT语句中的主键，也都是同一个订单号。...数据库的唯一约束就可以保证，只有一次INSERT语句是执行成功的 幂等创建订单的时序图 ? 如果因为重复订单导致插入订单表失败，订单服务不要把这个错误返回给前端页面....3.2 解决方案 通用的解决方案 订单主表增加一列version。每次查询订单的时候，版本号要随着订单数据返回给页面。 页面在更新数据的请求中，把这个版本号作为更新请求的参数，带回给订单更新接口。
性能对比： • 运行速度： 使用索引前的查询时间可能是数秒，使用索引后的查询时间通常会降至毫秒级。 • 代码量： 代码量增加了索引创建语句，但查询语句保持不变。 2....避免SELECT * 应用场景： 在大表中只需要查询部分列的数据。 案例代码： 假设我们有一个包含多个列的表 employees，但我们只需要查询员工的ID和姓名。...使用技巧后： SELECT employee_id, employee_name FROM employees; 分析： • 只查询所需的列，减少了传输和处理的数据量。...案例代码： 假设我们需要将多个新订单插入到 orders 表中。...正确使用JOIN和子查询 应用场景： 多表联合查询和复杂查询。 案例代码： 假设我们有一个订单表 orders 和一个客户表 customers，需要查询每个订单的客户信息。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
腾讯会议
云直播
