Hive需要将元数据存储在数据库中,我们使用mysql,搭建mysql略。 1、将Hive安装包放在/opt下,解压,之后将mysql的jdbc连接包放在hive/lib下。...> javax.jdo.option.ConnectionURL jdbc:mysql:/...value> javax.jdo.option.ConnectionDriverName com.mysql.jdbc.Driver... javax.jdo.option.ConnectionPassword mysql...加入到PATH中,之后初始化,执行"schematool -dbType mysql -initSchema" 5、启动元数据服务,执行"hive --service metastore" 6、启动hiveserver
hadoop的版本是2.6.0 根据hive的源数据不同分为三种模式 1、内嵌模式,使用自带的derby 2、本地独立模式,本地mysql库 3、远程模式,远程mysql库...将如下配置复制进去 javax.jdo.option.ConnectionURL jdbc:mysql... com.mysql.jdbc.Driver 驱动名 <property...得配置完成,在远程主机上安装mysql,远程主机可以是任意操作系统,我这里用的是win7-x64,安装完成后新建数据库名为hive,字符集采用latin1, 回到centos7,找到hive主目录下得lib...,放入mysql得连接jar,mysql-connector-java-5.1.27-bin.jar,然后找到一个叫jline-2.1.2.jar得文件,复制他,去hadoop主目录将hadoop下得三个同名但不同版本得
启动命令 cd /export/servers/hive nohup bin/hive --service metastore & nohup bin/hive --service hiveserver2
hiveserver2 1、在hive服务器上启动hive server2,在你的hive主目录/bin/下找到并执行下面的命令,默认监听10000端口 #hiveserver2 2、使用cli在本机连接...connect jdbc:hive2://localhost:10000 user pwd user和pwd可以随便写的,连接后,可以执行sql语句了 3、在远程cli连接hive server2...connect jdbc:hive2://111.222.333.444:10000 user pwd 4、在windows客户端上使用图形界面软件连接hive server2,如SQuirrel...附加类路径:找到驱动程序jar包,加进去就可以了 名称随便写 地址示例填写jdbc:hive2://111.222.333.444:10000 类名填写org.apache.hive.jdbc.HiveDriver...配好连接后,连接会出现在左侧,双击就能连接hive仓库了。左上角有一个SQL tab,编写sql语句后,点击执行按钮(上面的小人图标按钮),就能看到执行结果了。 其他功能自行探索吧!
生效 source /etc/profile 3.配置hive-site.xml 先生成一个hive-site.xml cp hive-default.xml.template hive-site.xml...schematool -dbType mysql -initSchema 5.找不到jar org.apache.hadoop.hive.metastore.HiveMetaException: Failed...https://downloads.mysql.com/archives/c-j/ 下载解压获取jar 7.复制jar到hive到lib scp -r /Users/hh/desktop/mysql-connector-java...-5.1.46-bin.jar hh555:/root/hd/apache-hive-2.3.3-bin/lib/ 8.再次重新初始化mysql schematool -dbType mysql -initSchema...hive安装完毕!
hive.metastore.uris Thrift uri for the remote metastore... javax.jdo.option.ConnectionURL jdbc:mysql:/.../localhost:3306/mysql?...=true javax.jdo.option.ConnectionDriverName com.mysql.jdbc.Driver.../beeline -u jdbc:hive2://yangsy132:10000/default -n root -p yangsiyi
hive setup with remote mysql 1....操作远程主机 2.1 下载安装数据库 在远程主机安装MySQL数据库: wget http://dev.mysql.com/get/mysql57-community-release-el7-10.noarch.rpm...操作本地主机 重要 切到本地主机再继续 3.1 测试连接远程MySQL 切到本地主机,测试能否连通远程主机上的mysql服务: ping 192.168.56.106 # 测试后按Ctrl C退出 yum.../usr/share/java/mysql-connector-java.jar $HIVE_HOME/lib 3.9 使用远程MySQL初始化元数据库 # 初始化元数据库: schematool -initSchema...-dbType mysql 参考效果: 3.10 启动Hive的两个进程 启动hive服务: hive --service metastore & # 使进程在后台运行 # 课本33页截图是在前台运行
一、Hive的简单使用 基本的命令和MySQL的命令差不多 首先在 /opt/datas 下创建数据 students.txt 1001 zhangsan 1002 ...查看系统是否自带Mysql,将系统上的MySQL卸载 ? 然后首先安装Mysql-Server 其中有个重要的目录要查看 里面记录着Mysql的随机密码 ? ? ...OK,退出Mysql之后在重新登录一下,登录成功! 三、Hive配置metastore 首先进入到Hive的安装目录中 /opt/moudles/hive-..... ...创建一个文件 hive-site.xml 想里面配置连接Mysql的数据信息 账号 密码 连接地址 、驱动(这个驱动需要拷贝过来) <?...配置好后执行一下 bin/hive 在mysql数据库中可以看见 hive给自动创建的数据库 ? 查看一下这个数据库中的表 ?
但是这样就会出现一个情况:Derby是单例的,当你在一个终端打开了hive时,在另外一个终端打开hive命令行会报错。所以使用MySQL来存储元数据能够解决这个问题,并且也更方便迁移和备份。...-8.0.21.jar,将jar包移动至 /opt/apache-hive-1.2.2-bin/lib 下 配置Hive中MySQL的连接 第一步,在Hive的conf目录中新建文件hive-site.xml...://localhost:3306/hive_metastore?...2、配置MySQL后,第一次打开hive的时候Cli无响应: 这个问题查阅了很多资料并没有找到更加详细的信息,但是经过DEBUG初步判断还是MySQL数据库的问题,导致Hive第一次启动时无法正常完成Metastore...的数据表的初始化,按照上述第三步,在启动Hive前初始化下数据表即可:使用 schematool -dbType mysql -initSchema 命令进行初始化。
数据导入到mysql中 --注意: --export-dir /user/hive/warehouse/t_monitor_camera/ 这里的地址可以在hive中, --通过desc formatted.../ vi hive_to_mysql_for_vehicle export --connect jdbc:mysql://node1:3306/sqoop_db --username root --...QAZ2wsx3edc use sqoop_db; --如果有则删除 DROP TABLE IF EXISTS t_hive_to_mysql_for_vehicle; CREATE TABLE t_hive_to_mysql_for_vehicle.../vehicle_dir/hive_to_mysql_for_vehicle echo 'done.'.../hive_to_mysql_vehicle.sh 9.结果 9.1.执行脚本前,检查mysql table --执行脚本之前,查询t_hive_to_mysql_for_vehicle mysql>
Hive基础01、安装MySQL 目录 1、安装需要的包 2、卸载不需要的包 3、安装MySQL服务端 4、安装MySQL客户端 5、登录MySQL 6、修改密码 7、分配master权限 8、刷新权限...登录测试 ---- 1、安装需要的包 前置位置有【MySQL-server-5.1.73-1.glibc23.x86_64.rpm】和【MySQL-client-5.1.73-1.glibc23.x86...ypdomainname同domainname. 2、卸载不需要的包 yum remove mysql-libs -y 3、安装MySQL服务端 rpm -ivh MySQL-server-5.1.73...-1.glibc23.x86_64.rpm 4、安装MySQL客户端 rpm -ivh MySQL-client-5.1.73-1.glibc23.x86_64.rpm 5、登录MySQL mysql
Hive支持MySQL,Postgres,Oracle,MS SQL Server这四种数据库。...配置Hive Metastore存储到MySQL 需要在hive-site.xml配置如下的参数 Config Param Config Value Comment javax.jdo.option.ConnectionURL...com.mysql.jdbc.Driver MySQL JDBC driver class javax.jdo.option.ConnectionUserName user name...to MySQL server 打开$HIVE_HOME/conf下的hive-site.xml 添加上表中的配置到hive-site.xml中,如下图所示 WX20181116-231121@2x.png...然后使用Hive Schema Tool初始化Schema schematool -dbType mysql -initSchema 至此,我们就将Hive的Metastore存储到了MySQL中。
1.netstat -anpl | grep mysql 查看mysql的端口 如果没有请确定你的mysql已经成功安装好并运行 ps aux | grep mysql 查看mysql进程 2.centos7...add-port=3306/tcp #添加端口,格式为:端口/通讯协议 --permanent #永久生效 重启防火墙: systemctl restart firewalld.service 3.开启远程连接...动增加可以远程访问数据库的用户。...方法一、本地登入mysql,更改 "mysql" 数据库里的 "user" 表里的 "host" 项,将"localhost"改为"%" #mysql -u root -proot mysql>use...'@'%' IDENTIFIED BY 'root123' WITH GRANT OPTION; 操作完后切记执行以下命令刷新权限 FLUSH PRIVILEGES 这时再通过navicat远程链接
MySql是默认关闭远程连接的,需要给远程客户添加权限才能链接。 通过select*from mysql.user 查看用户及权限这个是可以查看权限的。。...首先:允许root用户在任何地方进行远程登录,并具有所有库任何操作权限,具体操作如下 : 首先进行授权操作语句: GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED...BY 'password' WITH GRANT OPTION 然后重载授权表 FLUSH PRIVILEGES 然后:允许root用户在一个特定的IP进行远程登录,并具有所有库任何操作权限,具体操作如下...是远程登录的密码设置!!
开启 MySQL 的远程登录需要一些配置,网上一些教程较陈旧,不适用于新版本。...改表法 更改 mysql 数据库里的 user 表里的 host 项,将 localhost 改为 % USE mysql; UPDATE user SET host = '%' WHERE user...= 'root'; SELECT host, user FROM user; 授权法 例如,你想 myuser 使用 mypassword 从任何主机连接到 mysql 服务器的话。...IDENTIFIED BY 'mypassword' WITH GRANT OPTION; FLUSH PRIVILEGES; 如果你想允许用户 myuser 从 IP 为 192.168.1.6 的主机连接到 mysql...IDENTIFIED BY 'mypassword' WITH GRANT OPTION; FLUSH PRIVILEGES; 如果你想允许用户 myuser 从 IP 为 192.168.1.6 的主机连接到 mysql
use mysql;进入mysql库 grant all privileges on \*.\* to root@'%'identified by 'ur passwd'; 设置允许远程连接 flush
MySQL开启远程连接 在Linux上面装完MySQL 或 MariaDB,远程登录报错 Host is not allowed to connect to this MySQL server,是因为没有开启远程登陆...解决方法如下: 1、在装有MySQL的机器上登录MySQL; mysql -u root -p你的密码 2、执行下面命令; use mysql; 3、执行下面命令,执行完可能会报错,不用管它。...update user set host = '%' where user = 'root'; 4、继续执行命令,来刷新MySQL的权限相关表; FLUSH PRIVILEGES; 经过上面4步,就可以解决这个问题了
1.授予远程主机访问MySQL 在MySQL Server端,执行mysql 命令进入mysql 命令模式。使用grant命令用来建立新用户,指定用户口令并增加用户权限。...; hostName:远程主机名或者IP地址; password:远程主机用户访问MySQL使用的密码。...授予远程主机10.22.22.22,用户名为dablelv使用密码123@abc来访问MySQL的数据库DEL_RESULT下所有数据表,但只有select权限。...远程主机可使用如下命令来访问: #run sql statement function runsql(){ dbHost="-h10.241.100.107" dbUserName="-...需要通过-h指定MySQL服务端的主机地址。 示例二: 授予来自任意远程主机的用户dablelv对MySQL服务端的所有数据库和数据表拥有所有权限。
1.背景 安装好 mysql 后,一般会使用客户端连接(必须Navcat)。本文描述了怎么设置远程连接。...2.思路 修改 root 账户的 host 等于 % 防火墙增加3306端口 处理密码的加密方式 3.操作 3.1 修改 root 账户的 host 等于 % 先看下 用户表的信息 use mysql...image.png 注意:这里的 root 账户的 host 的值是 localhost 开始修改,执行: mysql> use mysql; mysql> update user set host...3.2 重启 mysql systemctl stop mysqld.service systemctl start mysqld.service 3.3 为防火墙添加 3306 端口 # 为防火墙添加...; 看下修改后样子 执行 select host,user,plugin,authentication_string from mysql.user; ?
1、查看当前哪些用户可以访问 进入mysql shell show databases; use mysql ; select host, user ,password from user...; mysql> select host, user ,password from user; ±----------±-----±---------------------------------...node01 | | | ±----------±-----±------------------------------------------+ 2、修改配置,在user表中添加所有用户可以访问本mysql...表示主机上使用的用户 123456 表示用户所使用的密码 3、刷新生效 flush privileges; 检查更新 select host, user ,password from user; mysql...、 关闭防火墙 /etc/init.d/iptables stop chkconfig iptables off(开机不自动启动 chkconfig iptables on 开机自启) 5、远程连接
领取专属 10元无门槛券
手把手带您无忧上云