在线XML/JSON互相转换工具： http://tools.zalou.cn/code/xmljson
该文章是一篇关于操作系统基础知识和相关技术的文章，主要介绍了Linux操作系统的安装、配置、基本命令和常用工具的使用。同时，文章还涉及了虚拟机技术和容器技术的介绍，以及使用这些技术进行系统管理的技巧和方法。
可以看到是与 mariadb-libs-1:5.5.68-1.el7.x86_64 冲突了，删除该包即可。
原文出处： freenik@Jianshu 将 外部数据导入(import)数据库是在数据库应用中一个很常见的需求。其实这就是在数据的管理和操作中的ETL (Extract, transform,
image.png 主要配置文件说明 1）amoeba.xml 定义客户端如何连接amoeba等基础信息 2）dbServers.xml Amoeba作为数据库代理层，它一定会和很多数据库保持通信，因此它必须知道由它代理的数据库如何连接，比如最基础的：主机IP、端口、Amoeba使用的用户名和密码等等 3）rule.xml Amoeba为完成数据切分提供了完善的切分规则配置，为了了解如何分片数据、如何将数据库返回的数据整合，它必须知道切分规则 4）functionMap.xml 当我们书写SQL来操作数据
位置匹配用于指定应该在文本中什么地方进行匹配操作，先来看一个例子。
说所有函数有点夸张，有错误请指正！ usleep() unpack() uniqid() time_sleep_until() time_nanosleep() sleep() show_source() strip_whitespace() pack() ignore_user_abort() highlight_string() highlight_file() get_browser() exit() eval() die() defined() define() constant() connect
最近在一次MySQL数据迁移的过程中遭遇了字符集的问题，提示为"Character set 'utf8mb4' is not a compiled character set"。即是字符集utf8mb4不是一个编译的字符集以及没有在Index.xml文件里指定。下面是其处理过程及解决办法，供大家参考。
1、下载tomcat安装包 zip,解压放置C盘。 2、下载mysql zip安装包 解压放置C盘。 3、添加环境变量C:\Program Files\Java\jdk1.7.0_51\bin;C:\mysql-5.5.25-winx64\mysql-5.5.25-winx64\bin到path 4、设置myql.ini 添加 [client] default-character-set = utf8 # The MySQL server [mysqld] character-set-server = ut
是否继续？[y/N]：y 2.下载 mysql57-community-release-el7-8.noarch.rpm 的 YUM 源：
xml配置文件的相关说明：https://github.com/winsw/winsw/blob/v3/docs/xml-config-file.md
环境： mysql5.7 win7 jdk1.7（配置环境变量） http://forge.ow2.org/project/showfiles.php?group_id=170 所有历史版本下载
横空出世的MyCat截至到2015年4月，保守估计已经有超过60个项目在使用，主要应用在电信领域、互联网项目，大部分是交易和管理系统，少量是信息系统。比较大的系统中，数据规模单表单月30亿。本人也初步尝鲜，体验了一把，见以下描述，供大家参考。 一、安装mycat MyCAT 是使用 JAVA 语言进行编写开发，使用前需要先安装 JAVA 运行环境(JRE),由于 MyCAT 中使用 了 JDK7 中的一些特性，所以要求必须在 JDK7 以上的版本上运行。 环境准备 1) JDK 下载 http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads-1880260.html 注：必须 JDK7 或更高版本. 2) MySQL 下载 http://dev.mysql.com/downloads/mysql/5.5.html#downloads 注：MyCAT 支持多种数据库接入，如：MySQL、 SQLServer、 Oracle、 MongoDB 等，推荐使用 MySQL 做集群。 3) MyCAT 项目主页 https://github.com/MyCATApache/ 注：MyCAT 相关源码、文档都可以在此地址下进行下载。 windows下可以下载Mycat-server-1.4-RELEASE-yyyymmddxxxx-win.tar 将其解压在某个目录下，建议解压到本地某个盘符根目录下(不建议使用中文目录)，如下为解压后的： D:\>cd mycat D:\mycat>dir 驱动器 D 中的卷没有标签。 卷的序列号是 0006-4285 D:\mycat 的目录 2015/09/24 14:55 <DIR> . 2015/09/24 14:55 <DIR> .. 2015/09/24 14:55 <DIR> bin //bin 程序目录 2015/09/24 14:51 <DIR> catlet 2015/09/24 16:35 <DIR> conf //conf 目录下存放配置文件 2015/09/24 14:55 <DIR> lib //lib 目录下主要存放 mycat 依赖的一些 jar 文件 2015/09/25 10:49 <DIR> logs //log 目录下主要是日志存放 2015/09/22 23:30 217 version.txt D:\mycat>more version.txt //版本信息 BuildTime 2015-09-22 15:30:06 GitVersion b9af103db1f04afca17edaa05bfe3118ed0b23c2 MavenVersion 1.4-RELEASE GitUrl https://github.com/MyCATApache/Mycat-Server.git MyCatSite http://www.mycat.org.cn QQGroup 106088787 二、配置mycat 1、mycat的配置 文件全部基于xml文件来完成，位于mycat路径下的conf目录 通常包括以下配置文件：全部基于xml文件来完成，位于mycat路径下的conf目录，通常包括以下配置文件： autopartition-long.txt cacheservice.properties dnindex.properties ehcache.xml index_to_charset.properties log4j.xml //日志文件的相关配置 partition-hash-int.txt partition-range-mod.txt router.xml rule.xml schema.xml sequence_conf.properties sequence_db_conf.properties sequence_time_conf.properties server.xml wrapper.conf 2、基本配置 修改server.xml如下 <user name="test"> //配置连
Amoeba(变形虫)项目，专注 分布式数据库 proxy 开发。座落与Client、DB Server(s)之间。对客户端透明。具有负载均衡、高可用性、sql过滤、读写分离、可路由相关的query到目标数据库、可并发请求多台数据库合并结果。
一、安装前准备 1. 安装配置Hadoop，见http://blog.csdn.net/wzy0623/article/details/50681554 2. 下载安装包 mysql-5.7.10-linux-glibc2.5-x86_64 apache-hive-1.2.1-bin.tar.gz mysql-connector-java-5.1.38.tar.gz 二、安装MySQL 1. 解压 tar -zxvf mysql-5.7.10-linux-glibc2.5-x86_64.tar.gz 2. 建立软连接 ln -s /home/grid/mysql-5.7.10-linux-glibc2.5-x86_64 mysql 3. 建立数据目录 mkdir /home/grid/mysql/data 4. 编辑配置文件~/.my.cnf内容如下 [mysqld] basedir=/home/grid/mysql datadir=/home/grid/mysql/data log_error=/home/grid/mysql/data/master.err log_error_verbosity=2 5. 初始化安装，并记下初始密码 mysqld --defaults-file=/home/grid/.my.cnf --initialize 6. 启动MySQL mysqld --defaults-file=/home/grid/.my.cnf --user=grid & 7. 登录MySQL，修改初始密码 mysql -u root -p mysql> ALTER USER USER() IDENTIFIED BY 'new_password'; mysql> exit; 8. 在/etc/profile中添加环境变量 export PATH=$PATH:/home/grid/mysql/bin 三、安装配置hive 1. 解压 tar -zxvf apache-hive-1.2.1-bin.tar.gz 2. 建立软连接 ln -s /home/grid/apache-hive-1.2.1-bin hive 3. 建立临时目录 mkdir /home/grid/hive/iotmp 4. 建立配置文件hive-site.xml cp ~/hive/conf/hive-default.xml.template ~/hive/conf/hive-site.xml 5. 新建配置文件hive-site.xml，内容如下：
配置JBoss数据源，为什么要在JBoss中配置数据源？这其实是面向对象思想的一种体现：通过容器管理对数据库的访问。
读写分离：读写操作，分发不同的服务器，读分发到对应的服务器 （slave），写分发到对应的服务器（master）
系统环境及相关安装包： CentOS6.5 64位系统 tomcat6 :apache-tomcat-6.0.39.tar.gz mysql5.1.17 :rpm包 jdk1.6 :jdk-6u29-linux-x64.bin jdbc :mysql-connector-java-3.1.13-bin.jar
1.0版，普通企业应用基本都是单实例或单库的模式，采用单机实现数据库的访问。再向上，2.0版，随着业务的规模扩展，企业会采用双机数据库，如热备、读写分离的方式来提高性能或可靠性。最后，3.0版，单机实现所有数据的写会遇到最终的瓶颈，因此分库、分表是最终的数据库的高可用的解决方案。今天我们来讲讲用MyCat中间件实现MySql数据库的分库分表的实现。
上一篇试着进行了solr的安装和配置，以及如何solr的检索，今天试着简单的将solr连接MySQL数据库(才尝试了单表、一对多和多对多的还有待研究) 1、MySQL的目录结构 2、新建一个democ
resources/generator/generatorConfig.xml 文件如下：
这是一篇工具类的文章，工欲善其事必先利其器，要分析调试hive源码，必须搭建一套hive的运行环境。还记得第一次搭建hive源码调试环境，用了一个月的时间，才完全跑通整个调试过程。中间遇到各种各样莫名奇妙的问题，也有好多次想放弃，幸好坚持了下来。
Hive中搭建分为三中方式 a)内嵌Derby方式 b)Local方式 c)Remote方式 三种方式归根到底就是元数据的存储位置不一样。
1.在resources文件夹下创建一个目录mybatis-generator，在目录mybatis-generator下创建文件generatorConfig.xml(此处的目录名可任意取)
上一篇博文我们讲了怎样安装MySql，这篇文章为上篇的后续，此篇文章讲的是如何将Hive元数据配置到MySql。
LiquiBase是一个用于数据库重构和迁移的开源工具，通过日志文件的形式记录数据库的变更，然后执行日志文件中的修改，将数据库更新或回滚到一致的状态。它的目标是提供一种数据库类型无关的解决方案，通过执行schema类型的文件来达到迁移。其有点主要有以下：
# hadoop-env.sh 配置 export JAVA_HOME=`absolute path` # core-site.xml 配置 <configuration> <property> <name>fs.default.name</name> <value>hdfs://localhost:9000</value> </property> <property> <name>hadoop.tmp.dir</name> <value>/path/to/tmp</value> </property> </configuration> # hdfs-site.xml 配置 <configuration> <property> <name>dfs.replication</name> <value>1</value> </property> </configuration>
canal [kə'næl]，译意为水道/管道/沟渠，主要用途是基于 MySQL 数据库增量日志解析，提供增量数据订阅和消费
在做rctf2015的一道web题目的时候，遇到了一个显错注入，学习不少姿势，写下来好好研究下…
Mycat 目前还未全面支持MySQL 8以上的版本，可能会导致一些问题，例如Mycat连接MySQL 8时可能会报密码错误，因为新版的密码加密方式与旧版不一样。还有就是时区问题，新版的连接方式需要增加时区参数。除此之外，可能还会有一些其他问题。因此，我们需要更改Mycat的一些配置，让其能正常连接MySQL 8.x。
注解@Autowired代表在spring ioc 定位所有的Bean后，这个字段需要按类型来进行注入。
在Database一列中显示NULL是因为我们当前没有选择任何数据库。因此，使用下面的语句先选择一个数据库,就能看到相应的结果。
2.1 设置quartz /pentaho-server/pentaho-solutions/system/quartz/quartz.properties
1. 如何使用SELECT语句找到你正在运行的服务器的版本并打印出当前数据库的名称? 答：下面的语句的结果会显示服务器的版本和当前的数据库名称 mysql> SELECT VERSION(), DA
dble是上海爱可生信息技术股份有限公司基于mysql的高可用扩展性的分布式中间件。江湖人送外号MyCat Plus。开源地址
wget http://mirrors.hust.edu.cn/apache/hive/hive-0.12.0/hive-0.12.0.tar.gz
MyBatis 本是apache的一个开源项目iBatis, 2010年这个项目由apache software foundation 迁移到了google code，并且改名为MyBatis 。2013年11月迁移到Github。
首次认识mycat，最容易是从示例着手去了解，比如此次示例是结合mysql完成数据的分库分表，进行横向扩展。
一.Installation & Configration 二.Advanced Usage of the Liquibase 三.Frequently Questions
环境：四台主机，两台mysql做主从：master和slave 一台mysql做测试，ip：10.30.162.142 一台mycat做读写分离，ip：192.168.122.230
SqlSessionFactory是MyBatis框架中十分重要的对象，它是单个数据库映射关系经过编译后的内存镜像，其主要作用是创建SqlSession。
hadoop01-hadoop04：hadoop集群 hadoop01：MySQL服务器 hadoop02：Hive
rpm --import https://repo.mysql.com/RPM-GPG-KEY-mysql-2022
MyCat是一个开源的分布式数据库系统，是一个实现了MySQL协议的服务器，前端用户可以把它看作是一个数据库代理，用MySQL客户端工具和命令行访问，而其后端可以用MySQL原生协议与多个MySQL服务器通信，也可以用JDBC协议与大多数主流数据库服务器通信，其核心功能是分表分库，即将一个大表水平分割为N个小表，存储在后端MySQL服务器里或者其他数据库里。
Java Web 泛指以 Java 程序为基础向外提供 Web 服务的技术及相关工具，狭义上来说，我们也可以说 Java Web 是由 Servlet 程序提供的 Web 服务。 对我们而言，Tomcat 无疑是最常见的 Servlet 容器，所以在这个小节里，我们来搭建一个以 Tomcat 为核心的 Web 应用运行环境。 在这个环境中，我们还要组合进 MySQL 作为数据存储，Redis 作为 KV 存储。
Mysql的读写分离可以使用MySQL Proxy，也可以使用Amoeba。Amoeba(变形虫)项目是一个类似MySQL Proxy的分布式数据库中间代理层软件，是由陈思儒开发的一个开源的java项目。其主要功能包括读写分离，垂直分库，水平分库等，经过测试，发现其功能和稳定性都非常的不错，如果需要构架分布式数据库环境，采用Amoeba是一个不错的方案。目前Amoeba一共包括For aladdin,For MySQL和For Oracle三个版本，以下介绍主要关注For MySQL版本的一个读写分离实现。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
