松哥原创的四套视频教程已经全部杀青，感兴趣的小伙伴戳这里-->Spring Boot+Vue+微人事视频教程
这应该是 MySQL 原理中最底层的部分了，我们存在 MySQL 中的数据，到底在磁盘上长啥样。你可能会说，数据不都存储在聚簇索引中吗？但很遗憾，你并没有回答我的问题。我会再问你，那聚簇索引在磁盘上又长啥样？
注: sysbench的版本是1.0.14，MySQL的版本是5.7，Linux是Ubuntu16，运行内存是4G，可用的CPU核数是4。
1. 表空间是InnoDB存储引擎逻辑结构的最高层，所有的数据都存放在表空间中。默认，InnoDB存储引擎只有一个表空间ibdata1，即所有数据都存放在这个表空间内。如果用户启用了参数innodb_file_per_table，则每张表内的数据可以单独放到一个表空间内。
统计每个库每个表的大小是数据治理工作的最基本内容，本文将从抽样统计结果及精确统计结果两方面来统计MySQL的每个库每个表的数据量情况。
介绍 在数据库运维过程中，优化 SQL 是 DBA 团队的日常任务。例行 SQL 优化，不仅可以提升程序性能，还能够降低线上故障的概率。 目前常用的 SQL 优化方式包括但不限于：业务层优化、SQL逻辑优化、索引优化等。其中索引优化通常通过调整索引或新增索引从而达到 SQL 优化的目的。索引优化往往可以在短时间内产生非常巨大的效果。如果能够将索引优化转化成工具化、标准化的流程，减少人工介入的工作量，无疑会大大提高DBA的工作效率。 SQLAdvisor 是由美团点评公司北京DBA团队开发维护的 SQL 优化
mysql> show variables like ‘%storage_engine%’; #查看mysql当前默认的存储引擎
== 存储引擎就是存储数据、建立索引、更新 / 查询数据等技术的实现方式。存储引擎是基于表的，而不是基于库的，所以存储引擎也可称为表类型。（MySQL5.5 之后默认的存储引擎 —— InnoDB） ==
廖坚钧，PingCAP Data Platform 研发工程师，专注于数据库架构和生态工具方向。
最近几年，云数据库市场日趋繁荣，进入百花齐放、百家争鸣的时代，头部云计算厂商相继推出了自己的数据库产品，特别是亚马逊的Aurora、阿里云的PolarDB、华为云的GaussDB等等。
🧑个人简介：大家好，我是 shark-Gao，一个想要与大家共同进步的男人😉😉
上面我们介绍了什么是存储引擎，以及如何在建表时如何指定存储引擎，接下来我们就来介绍下来上面
这一节本来计划开始索引的学习，但是在InnoDB存储引擎的索引里，存在一些数据存储结构的概念，这一节先了解一下InnodDB的逻辑存储结构，为索引的学习打好基础。
压缩表从名字上来看，简单理解为压缩后的表，也就是把原始表根据一定的压缩算法按照一定的压缩比率压缩后生成的表。
InnoDB存储引擎的逻辑存储结构和 Oracle大致相同 ，所有数据都被逻辑地存放在一个空间中 ，我们称之为表空间 （ tablespace ） 。表空间又由段 （ segment ） 、区 （ extent ） 、页 ( page ） 组成 。 InnoDB存储引擎的逻辑存储结构大致如图4-1所示。
在有赞大数据平台发展初期，业务量不大，开发者对业务完全熟悉，从 ETL 到统计分析都可以轻松搞定，当时没有想过要做一个元数据系统。
还在为新安装的mysql服务，不知道修改哪些默认配置而发愁吗？mysql可调整参数有100多个，到底要立即！马上！调整哪些最重要的参数？
今天没怎么学习，简单写下MySQL里面innodb存储引擎下的索引组织表吧。
从InnoDB存储引擎的存储结构看，所有数据都被逻辑地放在一个空间中，称之为表空间(tablespace)、区(extent)、页(page)组成，页在一些文档中也被称之为块(block)。
在mysql中有一个默认的数据表information_schema，information_schema这张数据表保存了MySQL服务器所有数据库的信息。如数据库名，数据库的表，表栏的数据类型与访问权限等。再简单点，这台MySQL服务器上，到底有哪些数据库、各个数据库有哪些表，每张表的字段类型是什么，各个数据库要什么权限才能访问，等等信息都保存在information_schema表里面，所以请勿删改此表。
在mysql中有一个默认的数据表information_schema，information_schema这张数据表保存了MySQL服务器所有数据库的信息。如数据库名，数据库的表，表栏的数据类型与访问权限等。
MySQL优化框架 1. SQL语句优化 2. 索引优化 3. 数据库结构优化 4. InnoDB表优化 5. MyISAM表优化 6. Memory表优化 7. 理解查询执行计划 8. 缓冲和缓存
近几年来，人工智能逐渐火热起来，特别是和大数据一起结合使用。人工智能的主要场景又包括图像能力、语音能力、自然语言处理能力和用户画像能力等等。这些场景我们都需要处理海量的数据，处理完的数据一般都需要存储起来，这些数据的特点主要有如下几点：
当旧业务需要改造为基于 dble 的分布式业务时，会面临已有历史数据的拆分和导入问题，dble 支持的导入导出方式有多种，具体详见文档3.11.1，本次我们介绍的 split 功能可以理解为导入过程加速器，那它是怎么加速的呢？
在InnoDB中我们可能会遇到死锁，一般情况下我们对于死锁无需关注，MySQL会自己处理，不过如果我们在error日志中发现大量的死锁，就需要我们检查应用并进行相应的处理
本文主要参考官网的优化 https://dev.mysql.com/doc/refman/5.7/en/optimization.html
存储引擎 Storage engine：MySQL 中的数据、索引以及其他对象是如何存储的，是一套文件系统的实现。
一说起MySQL使用的内存，你可能会想到各种buffer，最著名的莫过于innodb buffer pool了，它是内存使用的大户，还有sort buffer等等。除了这些buffer之外，可能还有一些细枝末节，今天我们来总结一下。
ClickHouse 在执行分析查询时的速度优势很好的弥补了 MySQL 的不足，但是对于很多开发者和DBA来说，如何将MySQL稳定、高效、简单的同步到 ClickHouse 却很困难。本文对比了 NineData、MaterializeMySQL（ClickHouse自带）、Bifrost 三款产品，看看他们在同步时的差异。
(1)interactive_timeout ： 服务器在关闭它前在一个交互连接上等待行动的秒数。一个交互的客户被定义为对 mysql_real_connect()使用 CLIENT_INTERACTIVE 选项的客户。 默认数值是28800，我把它改为7200。
存储引擎就是存储数据、建立索引、更新/查询数据等技术的实现方式。存储引擎是基于表的，而不是基于库的，所以存储引擎也可被称为表类型。
早上上班，发现监控数据中，好几张表的所占数据空间突增，有的突增甚至达到了8G，仔细检测数据库之后，没有发现数据异常，那么问题出在哪里？
索引是数据库中一个非常重要的概念，能够帮助数据库系统更迅速高效地完成查询。本章将分上下两节来介绍MySQL的索引机制。上篇主要介绍索引的定义和InnoDB的索引实现。下篇主要介绍MyISAM的索引实现和常用类型的索引介绍。
即使是经验老道的人也会犯错，会引起很多麻烦。所以在盲目的运用这些推荐之前，请记住下面的内容：
很多小伙伴工作很长时间了，对于MySQL的掌握程度却仅仅停留在表面的CRUD，对于MySQL深层次的原理和技术知识了解的少之又少，随着工作年限的不断增长，职场竞争力却是不断降低的。很多时候，出去面试时，被面试官吊打的现象成了家常便饭。
表空间是InnoDB存储引擎逻辑结构的最高层， 如果用户启用了参数 innodb_file_per_table(在8.0版本中默认开启) ，则每张表都会有一个表空间（xxx.ibd），一个mysql实例可以对应多个表空间，用于存储记录、索引等数据。
Java面试通关手册（Java学习指南，欢迎Star，会一直完善下去，欢迎建议和指导）：https://github.com/Snailclimb/Java_Guide
当应用程序访问数据时， MySQL 将数据从磁盘读取到内存，或将内存数据写入磁盘是数据库系统常见的IO操作。相比内存操作，磁盘IO操作运行速度相对较慢，需消耗较多的时间。当出现大规模数据读取 比如全表扫描，频繁数据读写请求时，高并发的写入更新数据，IO操作可能成为系统瓶颈。
本系列出自《深入浅出MySQL》，全文以问答形式展开，是我的个人学习笔记。 问答录 Q：如果我只有一张白表，我为什么还要创建数据库？ A：SQL语言要求所有的表都放在数据库中，这当然有它的理由。SQL能控制多位用户同时访问表的行为，能够授予或撤销对整个数据库的访问权，这有时比控制每张表的权限要简单的多。 ---- Q：我发现CREATE DATABASE 命令的字母全是大写，一定要这样吗？ A：有些系统确实要求某些关键字采用大写形式，但SQL本身不区分大小写。也就是说，命令不大小写也可
以下是其github代码库：https://github.com/Qihoo360/Atlas
#!/bin/bash # mysql 的备份脚本 # 备份原理: # 1 # 使用列举出所有的库; # 2 # 使用每个库,列举出每张表,除了指定忽略的库; # 3 # 使用mysqldump 导出每一张表到文件:主机名/年月日/库/表.mysqldump.sql # 4 # 验证每张表的sql文件是否包含完成标志; # 5 # 压缩每个sql文件并删除本sql文件 # 6 # 强制删除超过x天的备份文件夹全部文件 # 7
1. general # 数据文件存放的目录 datadir=/var/lib/mysql # mysql.socket表示server和client在同一台服务器，并且使用localhost进行连接，就会使用socket进行连接 socket=/var/lib/mysql/mysql.sock # 存储mysql的pid pid_file=/var/lib/mysql/mysql.pid # mysql服务的端口号 port=3306 # mysql存储引擎 default_storage_eng
由上图可以看出，tablespace由segment组成，segment由extend组成，extend由page组成，page由row组成 在MySQL中默认会有一个共享表空间ibdata1，如果设置了innodb_file_per_table=on时，每张表内的数据放在各自的tablespace中，私有tablespace仅包括数据，索引，插入缓冲Bitmap页，而其他的例如回滚信息，插入缓冲索引页，系统事务信息，二次写缓冲等都还是放在共享表空间
大家好，我是鱼皮，相信很多面试后端的朋友都被问到过这道题：MySQL 如何性能优化？
笔者是在两年前接手公司的财务系统的开发和维护工作。在系统移交的初期，笔者和团队就发现，系统内有一张 5000W+ 的大表。
MySQL中基本索引类型，没有什么限制，允许在定义索引的列中插入重复值和空值，纯粹为了查询数据更快一点。
如果innodb_file_per_table 为 ON 将建立独立的表空间，文件为tablename.ibd；
通过 前面的文章 我们了解到 B+ 树索引具有"最左前缀匹配"的特性，因此，对于以下查询 B+ 树索引能很好的适配。
hello，小伙伴们下午好。俗话说的好，一时拖更一时爽，一直拖更一直爽。但是今天决定更一下啦。高能预警，为了还债，特地写了篇长文。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
