1.0版，普通企业应用基本都是单实例或单库的模式，采用单机实现数据库的访问。再向上，2.0版，随着业务的规模扩展，企业会采用双机数据库，如热备、读写分离的方式来提高性能或可靠性。最后，3.0版，单机实现所有数据的写会遇到最终的瓶颈，因此分库、分表是最终的数据库的高可用的解决方案。今天我们来讲讲用MyCat中间件实现MySql数据库的分库分表的实现。
系统开发中，数据库是非常重要的一个点。除了程序的本身的优化，如：SQL语句优化、代码优化，数据库的处理本身优化也是非常重要的。主从、热备、分表分库等都是系统发展迟早会遇到的技术问题问题。Mycat是一个广受好评的数据库中间件，已经在很多产品上进行使用了。希望通过这篇文章的介绍，能学会Mycat的使用。 安装 Mycat官网：http://www.mycat.io/ 可以了解下Mycat的背景和应用情况，这样使用起来比较有信心。 Mycat下载地址：http://dl.mycat.io/ 官网有个文档，属于详
当大批软件工程师开始觉醒，用互联网思维思考和规划自己的人生，第四次工业革命才拉开序幕——《Mycat 宣言》
4 由于机器有限，尽可能地把三个站点放到同一台服务器上，然后做负载均衡集群，要求所有站点域名解析到一个ip上，也就是说只有一个出口ip
根据不同的系统选择不同的版本。包括linux、windows、mac,作者考虑还是非常周全的，当然，也有源码版的。（ps:源码版的下载后，只要配置正确，就可以正常运行调试，这个赞一下。）
将数据库连接作为对象存储在内存中，当用户需要访问数据库时，首次会建立连接，后面并非建立一个新的连接，而是从连接池中取出一个已建立的空闲连接对象。
mycat实现MySQL读写分离mycat是什么? Mycat是一个开源的分布式数据库系统，但是由于真正的数据库需要存储引擎，而Mycat并没有存储引擎，所以并不是完全意义的分布式数据库系统。Myca
读写分离：读写操作，分发不同的服务器，读分发到对应的服务器 （slave），写分发到对应的服务器（master）
1原主库ssh能连接，截取缺失部分日志scp到各个从库(/var/tmp/xxxx)调用save_binary_logs
将数据库连接作为对象存储在内存中，当用户需要访问数据库时，首次会建立连接，后面并非建立一个新的连接，而是从连接池中取出一个已建立的空闲连接对象。 使用完毕后，用户也并非将连接关闭，而是将连接放回连接池中，以供下一个请求访问使用。而连接的建立、断开都由连接池自身来管理。
Mycat前世今生 如果我有一个32核心的服务器，我就可以实现1个亿的数据分片，我有32核心的服务器么？没有，所以我至今无法实现1个亿 的数据分片。——Mycat ‘s Plan 上面这句话是Mycat 1.0快要完成时候的一段感言，而当发展到Mycat 1.3的时候，我们又有了一个新的Plan： 如果我们有10台物理机，我们就可以实现1000亿的数据分片，我们有10台物理机么？没有，所以，Mycat至今没有机会验证 1000亿大数据的支撑能力——Mycat ‘s Plan 2.0 “每一个成功的男人背后都有一个女人”。自然Mycat也逃脱不了这个法则。Mycat背后是阿里曾经开源的知名产品—— Cobar。Cobar的核心功能和优势是MySQL数据库分片，此产品曾经广为流传，据说最早的发起者对Mysql很精通，后来从阿里 跳槽了，阿里随后开源的Cobar，并维持到2013年年初，然后，就没有然后了。 Cobar的思路和实现路径的确不错。基于Java开发的，实现了MySQL公开的二进制传输协议，巧妙地将自己伪装成一个MySQL Server，目前市面上绝大多数MySQL客户端工具和应用都能兼容。比自己实现一个新的数据库协议要明智的多，因为生态环境在 哪里摆着。 Cobar使用起来也非常方便。由于是基于Java语言开发的，下载下来解压，安装JDK，然后配置几个不是很复杂的配置文件，猛 击鼠标，就能启动Cobar。因此这个开源产品赢得了很多Java粉丝以及PHP用户的追捧。当然，笨人(Leader us)也跟着进入，并 且在某个大型云项目中——“苦海无边”的煎着熬，良久。 爱情就像是见鬼。只有撞见了，你才会明白爱情是怎么回事。TA是如此神秘，欲语还羞。情窦初开的你又玩命将TA的优点放大， 使自己成为一只迷途的羔羊。每个用过Cobar的人就像谈过一段一波三折、荡气回肠的爱情，令你肝肠寸断。就像围城：里面的 人已经出不来了，还有更多的人拼命想挤进去。 仅以此文，献给哪些努力在IT界寻求未来的精英和小白们，还有更多被无视的，正准备转行的同仁，同在江湖混，不容易啊，面 试时候就装装糊涂，放人家一马，说不定，以后又是一个Made in China的乔布斯啊。 如果我有一个32核心的服务器，我就可以实现1个亿的数据分片，我有32核心的服务器么？没有，所以我至今无法实现1个亿的数 据分片。——Mycat ‘s Plan 曾经的TA 曾经的TA，长发飘飘，肤若凝脂，国色天香，长袖善舞，所以，一笑倾城。 那已成传说，一如您年少时的坚持：“书中自有黄金屋…” Cobar曾是多少IT骚年心中的那个TA，有关Cobar的这段美好的描述(不能说是广告)俘虏了众多程序猿躁动纯真的心： Cobar是阿里巴巴研发的关系型数据的分布式处理系统，该产品成功替代了原先基于Oracle的数据存储方案，目前已 经接管了3000+个MySQL数据库的schema，平均每天处理近50亿次的SQL执行请求。 50亿有多大？99%的普通人类看到这个数字，已经不能呼吸。当然，我指的是**RMB**。99%的程序猿除了对工资比较敏感，其 实对数字通常并不感冒。上面这个简单的数字描述，已立刻让我们程序型的大脑短路。恨不得立刻百度Cobar，立刻 Download，立刻熬夜研究。做个简单的推算，50亿次请求转换为每个schema每秒的数据访问请求即TPS，于是我们得到一个让 自己不能相信的数字：20TPS，每秒不到20个访问。 Cobar最重要的特性是分库分表。Cobar可以让你把一个MySQL的Table放到10个甚至100个位于不同物理机上的MySQL服务器 上去存储，而在用户看来是一张表（逻辑表）。这样功能很有价值。比如：我们有1亿的订单，则可以划分为10个分片，存储到 2-10个物理机上。每个MySQL服务器的压力减少，而系统的响应时间则不会增加。看上去很完美的功能，而且潜意识里，执行 这句SQL： select count(*) from order 100%的人都会认为：会返回1条数据，但事实上，Cobar会返回N条数据，N=分片个数。 接下来我们继续执行SQL: select count(*) from order order by order_date 你会发现奇怪的乱序现象，而且结果还随机，这是因为，Cobar只是简单的把上述SQL发给了后端N个分片对应的MySQL服务器去执 行，然后把结果集直接输出…. 再继续看看，我们常用的Limit分页的结果…可以么？答案是：**不可以** 这个问题可以在客户端程序里做些工作来解决。所以随后出现了Cobar Client。据我所知，很多Cobar的使用者也都是自行开发 了类似Cobar Client的工具来解决此类问题。从实际应用效果来说，一方面，客户端编程方式解决，困难度很高，Bug率也居高 不下；另一方面，对于DBA和
开源安全基金会（OpenSSF）发布了 Github 上一些热门开源项目的关键性评分数据。相比于项目的 Star 数量来说，这个关键性评分的含金量更高、更能反应项目的价值。
前端开发中，每天和我们见面最多的也许就是 this 关键字了，一直想总结一篇 this 的文章，然后看到了 Gentle Explanation of "this" in JavaScript ，总结的太好了，这里就翻译一下吧。
MyCAT 是使用JAVA开发的，必须运行于JRE的环境中，MyCAT的运行依赖不低于JDK7版本的环境
在MyCat中，当执行一条SQL语句时，MyCat需要进行SQL解析、分片分析、路由分析、读写分离分析等操作，最终经过一系列的分析决定将当前的SQL语句到底路由到那几个(或哪一个)节点数据库，数据库将数据执行完毕后，如果有返回的结果，则将结果返回给MyCat，最终还需要在MyCat中进行结果合并、聚合处理、排序处理、分页处理等操作，最终再将结果返回给客户端。
将Mycat-server-1.6.7.1-release-20190627191042-linux重命名为mycat
工作这些年来，也去了一些地方，有了一些见闻，隐隐感觉很多文化和猫有着千丝万缕的联系。就拿IT行业来说吧，猫有着很高的曝光率，比如大名鼎鼎的tomcat，是由SUN（曾经的千亿帝国这几天新闻不断)的软件构架师詹姆斯·邓肯·戴维森开发，并由Sun贡献给Apache软件基金会，他希望这种动物能够自己照顾自己，将其命名为Tomcat，于是乎这个名字就留下来了。 在Oracle中我最喜欢查看的一个数据字典试图就是cat,这是典型的猫文化，没有其他的技术意味。 最早听到mycat的时候，我意味是一个国外的
之后得到类似于Mycat-web-1.0-SNAPSHOT-20160215151602-linux.tar.gz这个文件，部署到和zookeeper同一台服务器上。 如果要部署到其他机器，需要修改mycat-web\mycat-web\WEB-INF\classes\ mycat.properties配置文件 zookeeper=x.x.x.x:xxxx
随着互联网的迅速发展，数据量的增长和访问量的增加，单一数据库已经不能满足大规模网站的需求。传统的单机数据库在数据量达到一定级别时，系统性能会急剧下降，甚至系统崩溃。为了解决这个问题，数据库集群应运而生。
MyCat权威指南：http://www.mycat.io/document/Mycat_V1.6.0.pdf
安装mysql5.6：https://my.oschina.net/u/3497124/blog/1488479 安装Java1.8：https://my.oschina.net/u/3497124/blog/1525269
cd /usr/local/mycat/conf vim wrapper.conf
进入官网 http://www.mycat.org.cn/ 可以看到当前最新版本为 Mycat2，企业中一般不会选择最新版本，一是不够稳定，二是如果出现问题，解决方案不是太容易找到。
master（虚拟机centos7，NAT模式，固定ip）：192.168.131.129
如果是在多台 Linux 系统中组建的 MyCAT 集群，那需要在 MyCAT Server 所在的服务器上配置对
http://www.mycat.io/document/mycat-definitive-guide.pdf
横空出世的MyCat截至到2015年4月，保守估计已经有超过60个项目在使用，主要应用在电信领域、互联网项目，大部分是交易和管理系统，少量是信息系统。比较大的系统中，数据规模单表单月30亿。本人也初步尝鲜，体验了一把，见以下描述，供大家参考。 一、安装mycat MyCAT 是使用 JAVA 语言进行编写开发，使用前需要先安装 JAVA 运行环境(JRE),由于 MyCAT 中使用 了 JDK7 中的一些特性，所以要求必须在 JDK7 以上的版本上运行。 环境准备 1) JDK 下载 http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads-1880260.html 注：必须 JDK7 或更高版本. 2) MySQL 下载 http://dev.mysql.com/downloads/mysql/5.5.html#downloads 注：MyCAT 支持多种数据库接入，如：MySQL、 SQLServer、 Oracle、 MongoDB 等，推荐使用 MySQL 做集群。 3) MyCAT 项目主页 https://github.com/MyCATApache/ 注：MyCAT 相关源码、文档都可以在此地址下进行下载。 windows下可以下载Mycat-server-1.4-RELEASE-yyyymmddxxxx-win.tar 将其解压在某个目录下，建议解压到本地某个盘符根目录下(不建议使用中文目录)，如下为解压后的： D:\>cd mycat D:\mycat>dir 驱动器 D 中的卷没有标签。 卷的序列号是 0006-4285 D:\mycat 的目录 2015/09/24 14:55 <DIR> . 2015/09/24 14:55 <DIR> .. 2015/09/24 14:55 <DIR> bin //bin 程序目录 2015/09/24 14:51 <DIR> catlet 2015/09/24 16:35 <DIR> conf //conf 目录下存放配置文件 2015/09/24 14:55 <DIR> lib //lib 目录下主要存放 mycat 依赖的一些 jar 文件 2015/09/25 10:49 <DIR> logs //log 目录下主要是日志存放 2015/09/22 23:30 217 version.txt D:\mycat>more version.txt //版本信息 BuildTime 2015-09-22 15:30:06 GitVersion b9af103db1f04afca17edaa05bfe3118ed0b23c2 MavenVersion 1.4-RELEASE GitUrl https://github.com/MyCATApache/Mycat-Server.git MyCatSite http://www.mycat.org.cn QQGroup 106088787 二、配置mycat 1、mycat的配置 文件全部基于xml文件来完成，位于mycat路径下的conf目录 通常包括以下配置文件：全部基于xml文件来完成，位于mycat路径下的conf目录，通常包括以下配置文件： autopartition-long.txt cacheservice.properties dnindex.properties ehcache.xml index_to_charset.properties log4j.xml //日志文件的相关配置 partition-hash-int.txt partition-range-mod.txt router.xml rule.xml schema.xml sequence_conf.properties sequence_db_conf.properties sequence_time_conf.properties server.xml wrapper.conf 2、基本配置 修改server.xml如下 <user name="test"> //配置连
版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/linzhiqiang0316/article/details/79619246
系统开发中，数据库是非常重要的一个点。除了程序的本身的优化，如：SQL语句优化、代码优化，数据库的处理本身优化也是非常重要的。主从、热备、分表分库等都是系统发展迟早会遇到的技术问题问题。Mycat是一个广受好评的数据库中间件，已经在很多产品上进行使用了。希望通过这篇文章的介绍，能学会Mycat的使用。
作者个人研发的在高并发场景下，提供的简单、稳定、可扩展的延迟消息队列框架，具有精准的定时任务和延迟队列处理功能。自开源半年多以来，已成功为十几家中小型企业提供了精准定时调度方案，经受住了生产环境的考验。为使更多童鞋受益，现给出开源框架地址：
每个方法都有优缺点，我们选择对程序代码改动最小(只改数据源)的方法三，讲解mycat的配置和使用。
通过mycat来实现读写分离:使用mycat提供的读写分离功能，mycat连接多个数据库，数据源只需要连接mycat，对于开发人员而言他还是连接了一个数据库(实际是mysql的mycat中间件)，而且也不需要根据不同 业务来选择不同的库，这样就不会有多余的代码产生
概念： MyCat 对自身不支持的 Sql 语句提供了一种解决方案——在要执行的 SQL 语句前添加额外的一段由注解SQL 组织的代码，这样 Sql 就能正确执行，这段代码称之为“注解”。注解的使用相当于对 mycat 不支持的 sql语句做了一层透明代理转发，直接交给目标的数据节点进行 sql 语句执行，其中注解 SQL 用于确定最终执行 SQL的数据节点。注解的形式是：
至于什么是Mycat，可能在不同的角色下有不同的理解。对MySQL架构有过了解的话，都知道MySQL实际上是由Server层和存储引擎层组成的。所以对于DBA来说，Mycat 就是 MySQL 的Server层。而 Mycat 后面连接的 MySQL Server，就好象是 MySQL 的存储引擎。因此，Mycat 本身并不存储数据，数据是在后端的 MySQL 上存储的，因此数据的可靠性 以及事务等依旧是 MySQL 保证的。
环境：四台主机，两台mysql做主从：master和slave 一台mysql做测试，ip：10.30.162.142 一台mycat做读写分离，ip：192.168.122.230
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
参数： ./mycat { console | start | stop | restart | status | dump }
可以看到多出了一个日志文件 /var/log/haproxy.log ，同时也打开了 UDP 的 514 端口
Mycat-web(现改名为Mycat-eye)是对Mycat-server提供监控服务，通过JDBC连接对Mycat,MySQL监控，监控远程服务器的cpu,内存，网络，磁盘等情况的使用。Mycat-web运行过程中需要依赖zookeeper,因此需要先安装zookeeper,下载地址如下：
本文主要基于 MyCAT 1.6.5 正式版 1. 依赖工具 2. 源码拉取 3. 数据库配置 4. MyCat 配置 5. MyCAT 启动 6. MyCAT 测试 7. 交流 1. 依赖工具 Maven Git JDK MySQL IntelliJ IDEA 2. 源码拉取 从官方仓库 https://github.com/MyCATApache/Mycat-Server Fork 出属于自己的仓库。为什么要 Fork ？既然开始阅读、调试源码，我们可能会写一些注释，有了自己的仓库，可以进行自由的提交
小编最近公司有个新的需求，数据量比较大，要涉及到分库分表。大概了解了一些主流的中间件，使用和网上资料比较多的是Mycat和sharding-jdbc，小编比较倾向于Mycat。原因很简单就是参考的资料比较多，教学比较多，小编经过一天的尝试，终于完成了！这篇主要是实战，一些知识点请自行百度，小编也是没有了解太多，最主要的目的是看一下效果！网上全使用Docker还是不多，而且很迷糊，小编进行补充，让大家少走弯路！！
0x01： Mycat 下载 wget http://dl.mycat.io/1.6.7.3/20190927161129/Mycat-server-1.6.7.3-release-20190927
什么是MyCat 一个彻底开源的，面向企业应用开发的大数据库集群 支持事务、ACID、可以替代MySQL的加强版数据库 一个可以视为MySQL集群的企业级数据库，用来替代昂贵的Oracle集群 一个融合内存缓存技术、NoSQL技术、HDFS大数据的新型SQL Server 结合传统数据库和新型分布式数据仓库的新一代企业级数据库产品 一个新颖的数据库中间件产品 从定义和分类来看，它是一个开源的分布式数据库系统，是一个实现了MySQL协议的Server，前端用户可以把它看做是一个数据库代理，用MySQL客户端工
这里我们所讨论的连接池是MyCat的后端连接池， 也就是MyCat后端与各个数据库节点之间的连接架构。
Mycat是采用java语言开发的开源的数据库中间件，支持Windows和Linux运行环境，下面介绍MyCat的Linux中的环境搭建。我们需要在准备好的服务器中安装如下软件。
MyCAT 是使用 JAVA 语言进行编写开发，使用前需要先安装 JAVA 运行环境(JRE),由于 MyCAT 中使用了JDK7 中的一些特性，所以要求必须在 JDK7 以上的版本上运行。
今天，终于安排到Mycat系列文章了。在Mycat系列文章中，我们一起从一个利用Mycat实现分库分表的案例作为入门程序。后续会持续更新Mycat原理、架构和底层源码解析的文章。希望Mycat系列文章能够帮助小伙伴们彻底掌握Mycat。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
