文档建议反馈控制台
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
发布
社区首页 >专栏 >[997]Impala Shell常用命令行选项与常用命令

[997]Impala Shell常用命令行选项与常用命令

作者头像
周小董
发布于 2021-06-01 21:10:30
发布于 2021-06-01 21:10:30
1.9K0
举报
文章被收录于专栏：python前行者python前行者

文章目录

常用命令行选项

-h或–help

显示帮助信息。

代码语言：javascript
复制
[root@node2 ~]# impala-shell -h

-k or --kerberos

当连接到 impalad 时使用 Kerberos 认证。如果要连接的 impalad 实例不支持 Kerberos，将显示一个错误

-i或–impalad

连接到指定的impalad节点。

代码语言：javascript
复制
[root@node2 ~]# impala-shell -i node3

-q或–query

指定要执行的Sql语句。

代码语言：javascript
复制
[root@node2 ~]# impala-shell -q "select studentid,sum(language) sum_language from data_warehouse.student_scores group by studentid"

-f或–query_file

可指定一个Sql脚本文件，脚本文件中多个Sql间用";"分隔。

代码语言：javascript
复制
# sql脚本文件
[root@node2 ~]# cat query.sql
use data_warehouse;
select studentid,sum(language) sum_language from student_scores group by studentid;

# impala执行查询
[root@node2 ~]# impala-shell -f query.sql

-o或–output_file

查询结果输出到指定文件。

代码语言：javascript
复制
[root@node2 ~]# impala-shell -o result.txt -q "select studentid,sum(language) sum_language from data_warehouse.student_scores group by studentid limit 3"

#查看结果文件
[root@node2 ~]# cat result.txt
+-----------+--------------+
| studentid | sum_language |
+-----------+--------------+
| 214       | 94           |
| 121       | 96           |
| 212       | 76           |
+-----------+--------------+

-B或–delimited

不使用默认格式化输出，以分隔模式输出。一般和–output_delimiter参数连用。

–output_delimiter

对使用-B模式输出的查询结果指定各字段间的分隔符。

–print_header

输出列名。

代码语言：javascript
复制
[root@node2 ~]# impala-shell -B --output_delimiter=',' --print_header -q "select studentid,sum(language) sum_language from data_warehouse.student_scores group by studentid" -o result.txt

#查看结果文件
[root@node2 ~]# cat result.txt
studentid,sum_language
214,94
121,96
212,76

-p或–show_profiles

显示查询的执行计划(与Explain语句输出相同)和查询语句底层执行步骤的详细信息。

-V或–verbose

输出详细信息。会输出Impala版本、Query语句、Coordinator信息、Query计划信息、Sql执行结果。

代码语言：javascript
复制
[root@node2 ~]# impala-shell -V -q "select studentid,sum(language) sum_language from data_warehouse.student_scores group by studentid limit 3"

–quiet

禁用详细信息输出。只会输出Sql执行结果。

代码语言：javascript
复制
[root@node2 ~]# impala-shell --quiet -q "select studentid,sum(language) sum_language from data_warehouse.student_scores group by studentid limit 3"

-v或–version

显示版本信息。

代码语言：javascript
复制
[root@node2 ~]# impala-shell -v
Impala Shell v2.12.0-cdh5.16.1 (4a3775e) built on Wed Nov 21 21:02:28 PST 2018

-r或–refresh_after_connect

连接后刷新Impala catalog。

注意:当Hive创建表后，通过Impala查询，需要在连接后刷新(类似于invalidate metadata)，才能看到最新的Hive元数据。

代码语言：javascript
复制
[root@node2 ~]# impala-shell -r -q "select studentid,sum(language) sum_language from data_warehouse.student_scores group by studentid limit 3"

-d或–database

指定要连接到的数据库。

代码语言：javascript
复制
[root@node2 ~]# impala-shell -d data_warehouse -q "select studentid,sum(language) sum_language from student_scores group by studentid limit 3"

–var

定义变量。

代码语言：javascript
复制
[root@node2 ~]# cat query_has_variable.sql
select studentid,language from data_warehouse.student_scores where language>=${var:tmp_var};

[root@node2 ~]# impala-shell --var tmp_var=90 -f query_has_variable.sql

-c

查询执行失败时继续执行

-l

启用 LDAP 认证

-u

当使用 -l 选项启用 LDAP 认证时，提供用户名(使用短用户名，而不是完整的 LDAP 专有名称(distinguished name)) ，shell 会提示输入密码

常用命令

查看相关内网IP：cat /etc/hosts

进入impala:

代码语言：javascript
复制
impala-shell;

显示数据库,数据表

代码语言：javascript
复制
show databases；

show tables;

查看表结构定义

代码语言：javascript
复制
desc my_first;

help命令

显示可用命令列表，如下:

代码语言：javascript
复制
[node2:21000] > help;

Documented commands (type help <topic>):
========================================
compute   exit     history  rerun   shell  unset   version
connect   explain  profile  select  show   use     with
describe  help     quit     set     tip    values

Undocumented commands:
======================
alter   delete  drop    load    src      update
create  desc    insert  source  summary  upsert

version命令

显示当前impala版本，如下:

代码语言：javascript
复制
[node2:21000] > version;
Shell version: Impala Shell v2.12.0-cdh5.16.1 (4a3775e) built on Wed Nov 21 21:02:28 PST 2018
Server version: impalad version 2.12.0-cdh5.16.1 RELEASE (build 4a3775ef6781301af81b23bca45a9faeca5e761d)

history命令

显示历史命令列表。历史命令在 ~/.impalahistory文件中。如下:

代码语言：javascript
复制
[node2:21000] > history;
[1]: show databases;
[2]: connect node3;
[3]: compute stats;
[4]: compute stats data_warehouse.student_scores;
[5]: history;
[6]: profile;
[7]: exit;
[8]: connect node3;
[9]: exit;
[10]: select version;
[11]: version;
[12]: help;
[13]: version;
[14]: history;

quit/exit命令

退出impala shell，如下:

代码语言：javascript
复制
[node2:21000] > exit;
Goodbye root

connect命令

连接到指定impalad节点,如下:

代码语言：javascript
复制
[node2:21000] > connect node3;
Connected to node3:21000
Server version: impalad version 2.12.0-cdh5.16.1 RELEASE (build 4a3775ef6781301af81b23bca45a9faeca5e761d)

compute stats命令

收集表、列的统计信息，如下:

代码语言：javascript
复制
[node2:21000] > compute stats student_scores;
Query: compute stats student_scores
+-----------------------------------------+
| summary                                 |
+-----------------------------------------+
| Updated 1 partition(s) and 7 column(s). |
+-----------------------------------------+
Fetched 1 row(s) in 0.66s

explain命令

返回给定查询的执行计划,如下:

代码语言：javascript
复制
[node2:21000] > explain select * from student_scores limit 10;
Query: explain select * from student_scores limit 10
+----------------------------------------------+
| Explain String                               |
+----------------------------------------------+
| Max Per-Host Resource Reservation: Memory=0B |
| Per-Host Resource Estimates: Memory=16.00MB  |
| Codegen disabled by planner                  |
|                                              |
| PLAN-ROOT SINK                               |
| |                                            |
| 00:SCAN HDFS [data_warehouse.student_scores] |
|    partitions=1/1 files=1 size=691B          |
|    limit: 10                                 |
+----------------------------------------------+
Fetched 9 row(s) in 0.02s

profile命令

返回最近执行语句的底层信息,常用于问题诊断和性能优化。如下:

代码语言：javascript
复制
[node2:21000] > Profile;

invalidate metadata 与 refresh命令

invalidate metadata 刷新全库所有表或某个表的元数据。

invalidate metadata语法:

代码语言：javascript
复制
#重新加载所有库中所有表的元数据和数据
INVALIDATE METADATA 

#重新加载某个表的元数据和数据
INVALIDATE METADATA [table]

refresh 刷新某个表或某个分区的数据。

refresh语法:

代码语言：javascript
复制
#刷新某个表的数据
REFRESH [table]

#刷新某个表某个分区的数据
REFRESH [table] PARTITION [partition]

set与unset命令

set 设置查询的参数，对当前会话中所有查询生效。如下:

代码语言：javascript
复制
# 只输入set，返回所有选项当前值
[node2:21000] > set;

# 设置Explain语句输出的信息量
[node2:21000] > set EXPLAIN_LEVEL=3;
EXPLAIN_LEVEL set to 3

unset 重置set命令设置的参数为默认值。如下:

代码语言：javascript
复制
[node2:21000] > unset EXPLAIN_LEVEL;
Unsetting option EXPLAIN_LEVEL

其他命令

其他命令如Create、Drop、Alter、Desc、Show、Insert、Updata、Upsert、Select略。

参考：https://blog.csdn.net/wangpei1949/article/details/88565085 https://blog.csdn.net/oracle8090/article/details/53038090 https://www.cnblogs.com/shaosks/p/9528228.html

本文参与 腾讯云自媒体同步曝光计划，分享自作者个人站点/博客。
原始发表：2021/05/29 ，如有侵权请联系 cloudcommunity@tencent.com 删除
html
https
网络安全
sql
数据库

本文分享自 作者个人站点/博客 前往查看

如有侵权，请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ，欢迎热爱写作的你一起参与！

html
https
网络安全
sql
数据库
评论
登录后参与评论
0 条评论
热度
最新
登录 后参与评论
推荐阅读
目录
  • 文章目录
  • 常用命令行选项
    • -h或–help
    • -k or --kerberos
    • -i或–impalad
    • -q或–query
    • -f或–query_file
    • -o或–output_file
    • -B或–delimited
    • –output_delimiter
    • –print_header
    • -p或–show_profiles
    • -V或–verbose
    • –quiet
    • -v或–version
    • -r或–refresh_after_connect
    • -d或–database
    • –var
    • -c
    • -l
    • -u
  • 常用命令
    • 查看相关内网IP：cat /etc/hosts
    • 进入impala:
    • 显示数据库,数据表
    • 查看表结构定义
    • help命令
    • version命令
    • history命令
    • quit/exit命令
    • connect命令
    • compute stats命令
    • explain命令
    • profile命令
    • invalidate metadata 与 refresh命令
    • set与unset命令
  • 其他命令
领券

腾讯云开发者

扫码关注腾讯云开发者

扫码关注腾讯云开发者

领取腾讯云代金券

热门产品

热门推荐

更多推荐

Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有 

深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 粤公网安备44030502008569号

腾讯云计算（北京）有限责任公司 京ICP证150476号 |  京ICP备11018762号

问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档

Copyright © 2013 - 2026 Tencent Cloud.

All Rights Reserved. 腾讯云 版权所有

登录 后参与评论