腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

文章/答案/技术大牛

发布

综合排序丨最热优先丨最新优先

高并发 MySQL 优化指南

这里我给大家推荐一个免费的Mysql实训营，我朋友诸葛老师关于大厂数据库Mysql优化的分享——《高并发Mysql性能优化与海量数据架构实战》，4天时间下来，你可以收获像我一样的优化MySQL数据库的实战经验 ►9月14日-9月17日每晚8点，集训四天，吃透Mysql 这个特训营课程一共有4天时间，通过这个课程：让你对高并发系统Mysql性能调优以及海量数据处理架构有一个深度的理解，深度掌握Mysql底层优化原理，快速提高分析与优化大型系统线上环境Mysql各种性能问题的能力以及构建大型高并发高可用海量数据处理架构的能力。尤其是像数据库Mysql优化，这可以说是高级资深工程师必备和想进一线互联网公司必备的一块技能。我之前已经学习过这个课程，里面讲的很多性能优化的技术，我已经用在公司项目里了，非常实用，强烈推荐！、Kafka消费者并发设计，以及Kafka安装和应用等内容设计模式涉及常见的23种经典设计模式 Spring原理及应用涉及Spring IoC原理、Spring AOP原理、Spring MVC

2022-09-13

3.3K0

标签:

云数据库 SQL Server

高并发编程-锁优化详解

为了提高线程对共享数据访问的效率，HotSpot虚拟机从JDK1.5到JDK1.6做了重大改进，提供了很多锁优化技术，包括自旋锁、自适应自旋锁、锁消除、锁粗化、轻量级锁和偏向锁。当线程挂起或恢复执行的时，会从用户态转入内核态中完成，这种操作是很消耗时间的，在并发情况下对应用和系统来说都有很大压力。所以，线程并发请求锁的时候，让后来的线程在不放弃处理器执行时间的情况下稍等一下，线程做自旋，自旋期间观察持有锁的线程是否会很快释放锁，这种技术就是所谓的自旋锁。锁消除一些使用了锁控制的代码，在虚拟机即时编译器运行时检测到不存在对共享数据的竞争访问，也就是代码只会被一个线程访问，此时会对锁进行消除，这项优化称为锁消除。但是，对于一些连续操作都对同一个对象进行反复加锁、释放锁的情况来说，缩小锁的作用范围会消耗更多的资源，这种情况需要扩大锁的作用范围，这项优化称为锁粗化。

2018-12-06

6850

标签:

Java高并发之锁优化

本文主要讲并行优化的几种方式, 其结构如下: 锁优化减少锁的持有时间例如避免给整个方法加锁 1 public synchronized void syncMethod(){ 2 Collections.synchronizedMap 其本质是在读写map操作上都加了锁, 在高并发下性能一般. JDK中各种涉及锁优化的并发类可以看之前的博文: 并发包总结 ThreadLocal 除了控制有限资源访问外, 我们还可以增加资源来保证对象线程安全. 如果想要在高并发场合下获取更好的性能, 则可以使用基于CAS的ConcurrentLinkedQueue. 关于无锁, 这边不再赘述, 之前博文已经有所介绍, 具体见: Java高并发之无锁与Atomic源码分析

2018-07-04

9740

标签:

高并发下linux ulimit优化

系统默认设置成1024，但是这个数字对于服务器特别是大并发的远远是不够的，所以，我们需要结合实际情况修改成一个更大更合理的值。 fs.file-max = 6553560 重启生效另外还有一个，/proc/sys/fs/file-nr，可以看到整个系统目前使用的文件句柄数量 ulimit -u 比如我们在模拟大规模http并发测试的时候

2021-11-19

3.4K0

标签:

SpringCloud高并发性能优化

SpringCloud高并发性能优化 1.1. 前言当系统的用户量上来，每秒QPS上千后，可能就会导致系统的各种卡顿，超时等情况，这时优化操作不可避免 1.2. 优化步骤第一步：优化大SQL，对于多表关联的SQL，当单表数据几百上千万行时，执行可能会达到好几秒，对微服务系统来说，我是不建议join多表操作，除非是数据量少的维表，我们可以将一句大SQL拆分成多个过程 Hystrix参数优化我们知道Hystrix线程池的大小和超时时间我们都是可以设置的，线上环境，我们需要对这些参数进行调整，该如何调整呢？降级操作对于降级操作，可以举些例子参考比如redis挂了，对查询可以查本地缓存，mysql等对插入操作，数据库挂了，可以尝试写入日志文件，或写入MQ之后恢复参考：每秒上万并发下的Spring Cloud参数优化实战微服务架构如何保障双11狂欢下的99.99%高可用

2019-08-21

2.9K0

标签:

云数据库 Redis®

Linux高并发内核参数优化

通过上述步骤，就为支持高并发TCP连接处理的通讯处理程序解除关于打开文件数量方面的系统限制。此外，如果你的连接数本身就很多，我们可以再优化一下TCP的可使用端口范围，进一步提升服务器的并发能力。在高TCP并发的情形下，如果使用同步I/O，这会严重阻塞程序的运转，除非为每个TCP连接的I/O创建一个线程。但是，过多的线程又会因系统对线程的调度造成巨大开销。综上所述，在开发支持高并发TCP连接的Linux应用程序时，应尽量使用epoll或AIO技术来实现并发的TCP连接上的I/O控制，这将为提升程序对高并发TCP连接的支持提供有效的I/O保证。经过这样的优化配置之后，服务器的TCP并发处理能力会显著提高。以上配置仅供参考，用于生产环境请根据自己的实际情况调整观察再调整。

陳斯托洛夫斯記

2022-10-27

5.5K0

标签:

高并发性能优化随笔

高并发性能优化技巧在我的高并发技巧系列文章中，我已经介绍了不少性能优化的技巧。为了保证这篇文章的完整性，可能会有一些重复。并发高就分库：单库的资源有限，支持的连接数不会太高。大多数情况下分库分表一起进行：因为量大和并发高经常同时出现。比如你要请求的两个接口没有关联性，可以考虑使用线程池去并发请求。总结本文介绍了多种高并发性能优化技巧，包括 MySQL 的索引和分库分表、缓存的使用、消息队列与流量聚合、线程池的优化等。这些技巧在实际开发中非常有用，可以帮助我们更好地应对高并发场景，提升系统的性能和稳定性。

2025-01-24

5340

标签:

高并发下的抽奖优化

这很明显是一个高并发下如何摆脱数据库读写，I/O瓶颈的问题。一旦数据库同一时间片内的连接数被打满，就会导致这个时间片内其他后来的全部请求因拿不到连接而超时，导致访问此数据库的其他环节也出现问题，所以RT就会异常飙高于是我们在思考着怎么优化这个高并发下的抽奖问题优化细节 1. 抽奖详情页 a. 线上开启缓存线上已写缓存逻辑，但是没有用switch开启。开启后可以减少数据库的并发IO压力，减少锁冲突。 b. 抽奖逻辑 a.队列削峰用额外的单进程处理一个队列，下单请求放到队列里，一个个处理，就不会有qps的高并发问题了。在原来的代码中用的是for update行锁，在高并发的情况下会很多这样的修改请求，每个请求都需要等待锁，某些线程可能永远都没有机会抢到这个锁，这种请求就会死在那里。

2020-02-20

1.9K0

标签:

Java高并发秒杀API(四)之高并发优化

高并发优化分析关于并发并发性上不去是因为当多个线程同时访问一行数据时，产生了事务，因此产生写锁，每当一个获取了事务的线程把锁释放，另一个排队线程才能拿到写锁，QPS(Query Per Second 在本项目中高并发发生在哪？高并发发生的地方在上图中，红色的部分就表示会发生高并发的地方，绿色部分表示对于高并发没有影响。为什么需要单独获取系统时间？这是为了我们的秒杀系统的优化做铺垫。由于Jedis并没有实现内部序列化操作，而Java内置的序列化机制性能又不高，我们是一个秒杀系统，需要考虑高并发优化，在这里我们采用开源社区提供的更高性能的自定义序列化工具protostuff。项目笔记相关链接 Java高并发秒杀API(一)之业务分析与DAO层 Java高并发秒杀API(二)之Service层 Java高并发秒杀API(三)之Web层 Java高并发秒杀API(四)之高并发优化） Java高并发秒杀API之业务分析与DAO层 Java高并发秒杀API之Service层 Java高并发秒杀API之Web层 Java高并发秒杀API之高并发优化警告本文最后更新于 October

2022-01-11

1.9K0

标签:

云数据库 Redis®

（四）Java高并发秒杀API之高并发优化

SeckillExecution(seckillId, SeckillStatEnum.INNER_ERROR); } } 改造执行秒杀executeSeckill方法,减少一道虚拟机GC程序,优化性能

2018-12-25

1.2K0

标签:

云数据库 Redis®