文章/答案/技术大牛

发布

社区首页 >问答首页 >spark2.2 kerberos环境，beeline为什么配置了principal，还需要用户名？

问spark2.2 kerberos环境，beeline为什么配置了principal，还需要用户名？

提问于 2019-07-13 06:36:03

回答 0关注 0查看 798

cdh5.15 spark2.2 kerberos环境，为什么配置了principal，还需要用户名

启动命令是./start-thriftserver.sh --hiveconf hive.server2.authentication.kerberos.principal=hive/gmjk-cm-server1@GMJK.COM \

--hiveconf hive.server2.authentication.kerberos.keytab=hive.keytab \

--principal hive/gmjk-cm-server1@GMJK.COM --keytab hive.keytab \

--hiveconf hive.server2.thrift.port=10001 \

--hiveconf hive.server2.thrift.bind.host=0.0.0.0

但是beeline的时候， !connect jdbc:hive2://192.168.1.115:10001/;principal=hive/gmjk-cm-server1@GMJK.COM还是要输入用户名密码

哪位大神能指导一下，十分感激

spark

hive

jdbc

kerberos

回答

成为首答用户。去写回答

Kerberos实战

kerberos node.js 大数据数据库 sql

前面的文章介绍了《Kerberos原理--经典对话》、《Kerberos基本概念及原理汇总》、《基于ambari的Kerberos安装配置》、《Windows本地安装配置Kerberos客户端》，已经成功安装了Kerberos KDC server，也在Ambari上启用了Kerberos，接下来我们再来研究一下如何使用Kerberos。

create17

2019/01/20

6.7K7

在CDP集群启用Kerberos手册

node.js 大数据 kerberos 访问管理

Kerberos协议主要用于计算机网络的身份鉴别(Authentication), 其特点是用户只需输入一次身份验证信息就可以凭借此验证获得的票据(ticket-granting ticket)访问多个服务，即SSO(Single Sign On)。由于在每个Client和Service之间建立了共享密钥，使得该协议具有相当的安全性。

大数据杂货铺

2021/10/09

1.8K0

如何为Hive2启用Kerberos认证

hive kerberos github https

温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 Fayson的github： https://github.com/fayson/cdhproject 提示：代码块部分可以左右滑动查看噢 1.文档编写目的 ---- 在前面的文章Fayson介绍了《如何在CDH集群中安装Hive2.3.3》，本篇文章Fayson主要介绍如何为已安装好的Hive2服务启用Kerberos认证。内容概述： 1.部署环境说明 2.添加Kerberos配置 3.验证Kerberos认证 4.总结测试环境： 1.C

Fayson

2018/07/12

2.9K0

使用beeline命令行访问Impala集群

hadoop hive kerberos jdk java

Impala本身提供了两种接口进行访问：beeswax和hs2，其中beeswax是impala自己开发的api，而hs2是兼容hive的。由于beesswax的连接方式需要使用impala自己提供的python脚本，而且不支持HA，因此这里就不再多做介绍。本文主要介绍如何使用hive的beeline客户端来连接impala集群。目前我们内部的Impala集群都支持zk的高可用，来解决单点故障的问题。不过对于用户来说，单节点和高可用只是体现在URL的不同，其他并无区别。

skyyws

2022/05/20

1.4K0

CDP中的Hive3系列之启动Apache Hive3

hive sql shell 数据库编程算法

如果您想使用 Apache Hive 进行快速测试，您可以使用 Hive 默认授权模式来执行此操作，假设您位于不安全的集群上（没有 Kerberos 或 Ranger 策略）。默认授权模式下，只有用户hive可以访问Hive。启动 Hive shell 的步骤，不要与 CDP 不支持的 Hive CLI 混淆，包括如何登录到集群。

大数据杂货铺

2021/08/20

1.4K0

Step by Step 实现基于 Cloudera 5.8.2 的企业级安全大数据平台 - Kerberos的整合

bash bash 指令 kerberos hbase hive

之前非常担心的一件事就是如果有人拿到了hdfs超级管理员帐号，直接把数据rm -rf怎么办？有了Kerberos，就可以轻松防止这样的事情发生。Kerberos 协议实现了比“质询－响应”模式协议更高的安全性：第一，在身份验证过程中，所有的数据都使用不同的密码进行加密，避免了相关验证信息的泄漏；第二，客户端和服务器会相互验证对方的身份，避免了中间人攻击；第三，客户端和服务器间的时间差被严格限制，避免了回放攻击。与 WINDOWS 系统中的用户安全令牌类似， Kerberos 服务通过“ 加密的票据（防止篡改） ”验证用户身份和提供用户访问权限；Kerberos 服务可以通过使用会话密钥确保在会话中数据的机密性和完整性。

王知无-import_bigdata

2020/05/29

8810

[1067]CDH6.3.2之Kerberos安全认证

kerberos hadoop 访问管理

Kerberos是一种计算机网络授权协议，用来在非安全网络中，对个人通信以安全的手段进行身份认证。这个词又指麻省理工学院为这个协议开发的一套计算机软件。软件设计上采用客户端/服务器结构，并且能够进行相互认证，即客户端和服务器端均可对对方进行身份认证。可以用于防止窃听、防止重放攻击、保护数据完整性等场合，是一种应用对称密钥体制进行密钥管理的系统。

周小董

2021/11/11

1.3K0

如何在Kerberos的CDH使用Sentry实现Spark SQL的权限控制

kerberos spark sql github https

温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 Fayson的github： https://github.com/fayson/cdhproject 提示：代码块部分可以左右滑动查看噢 1.文档编写目的 ---- 在前面的文章Fayson介绍了《如何在Kerberos环境下的CDH集群部署Spark1.6 Thrift及spark-sql客户端》。本文主要介绍当集群启用Kerberos和Sentry后，如何实现Spark SQL的权限管理。因为社区版Spark SQL并未做任何权限控制。

Fayson

2018/07/11

3.3K0

如何在Kerberos环境下使用Haproxy实现HiveServer2负载均衡

hive 负载均衡负载均衡缓存 jdbc

前面Fayson介绍了《如何使用HAProxy实现HiveServer2负载均衡》，本文主要介绍如何使用HAProxy实现Kerberos环境下HiveServer2的负载均衡。

Fayson

2018/03/29

1.7K0

如何在CDH启用Kerberos的情况下安装及使用Sentry(一)

其他

本文档主要讲述如何在启用Kerberos的CDH集群中安装配置及使用Sentry。

Fayson

2018/03/29

3.6K2

如何在Redhat7.4的CDH5.15中启用Kerberos

kerberos github https hadoop

温馨提示：如果使用电脑查看图片不清晰，可以使用手机打开文章单击文中的图片放大查看高清原图。 Fayson的github： https://github.com/fayson/cdhproject 提示：代码块部分可以左右滑动查看噢 1.文档编写目的 ---- 在前面的文章中，Fayson介绍了《如何在Redhat7.4安装CDH5.15》，这里我们基于这个环境开始安装MIT Kerberos。关于在CDH中启用Kerberos也可以参考之前的文章《如何在CDH集群启用Kerberos》，《如何在Redhat

Fayson

2018/07/12

1.1K0

如何在CDH6.0中启用Kerberos

其他

在前面的文章中，Fayson介绍了《如何在Redhat7.4安装CDH6.0》，这里我们基于这个环境开始安装Kerberos。关于CDH启用Kerberos的文章，前面Fayson也介绍过《如何在CDH集群启用Kerberos》、《如何在Redhat7.3的CDH5.14中启用Kerberos》、《如何在Redhat7.4的CDH5.15中启用Kerberos》和《如何在CDH6.0.0-beta1中启用Kerberos》，通过本文，我们也可以来看看CDH6启用Kerberos有哪些不一样的地方。

Fayson

2018/09/29

4.2K0

0628-6.2-如何在CDH6.2中启用Kerberos

kerberos 专用宿主机访问管理

在前面的文章中，Fayson介绍了《0610-6.2.0-如何在Redhat7.4安装CDH6.2》，这里我们基于这个环境开始安装Kerberos。Kerberos是一个用于安全认证第三方协议，并不是Hadoop专用，你也可以将其用于其他系统，它采用了传统的共享密钥的方式，实现了在网络环境不一定保证安全的环境下，client和server之间的通信，适用于client/server模型，由MIT开发和实现。而使用Cloudera Manager可以较为轻松的实现界面化的Kerberos集成，本文Fayson主要介绍如何在Redhat7.4的CDH6.2环境中启用Kerberos。

Fayson

2019/05/16

1.8K0

0477-如何在Redhat7.4的CDH5.16.1中启用Kerberos

安全

在前面的文章中，Fayson介绍了《0470-如何在Redhat7.4安装CDH5.16.1》，这里我们基于这个环境开始安装MIT Kerberos。本文Fayson主要介绍如何而在Redhat7.4的CDH5.16.1中启用Kerberos。

Fayson

2018/12/25

9310

如何使用HAProxy实现HiveServer2服务的LDAP和Kerberos认证负载均衡

hive kerberos

温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 Fayson的github：https://github.com/fayson/cdhproject 提示：代码块部分可以左右滑动查看噢 1.文档编写目的 ---- 在CDH集群中启用了Kerberos并集成了OPenLDAP，在前面的文章中Fayson也介绍了在CDH集群中启用Kerberos与集成OPenLDAP，集群中HiveServer2服务需要同时支持Kerberos和OPenLDAP认证的负载均衡，本篇文章主要介绍如何使用HAPro

Fayson

2018/04/24

2.1K0

如何使用HAProxy实现HiveServer2服务的LDAP和Kerberos认证负载均衡

如何在Redhat7.3的CDH5.14中启用Kerberos

kerberos github https hadoop

在前面的文章中，Fayson介绍了《如何在Redhat7.3安装CDH5.14》，这里我们基于这个环境开始安装MIT Kerberos。前面Fayson也介绍过《如何在CDH集群启用Kerberos》，当时的环境是Redhat6的，大家也可以看看Redhat6和7安装Kerberos有什么区别。

Fayson

2018/03/29

2.8K1

如何在CDH6.0.0-beta1中启用Kerberos

kerberos github https hadoop

温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 Fayson的github：https://github.com/fayson/cdhproject 提示：代码块部分可以左右滑动查看噢 1.文档编写目的 ---- 在前面的文章中，Fayson介绍了《如何在Redhat7.4安装CDH6.0.0_beta1》，这里我们基于这个环境开始安装Kerberos。关于CDH启用Kerberos的文章，前面Fayson也介绍过《如何在CDH集群启用Kerberos》和《如何在Redhat7.3的CDH5

Fayson

2018/07/12

9090

如何在CDH集群启用Kerberos

其他

本文档中将KDC服务安装在Cloudera Manager Server所在服务器上（KDC服务可根据自己需要安装在其他服务器）

Fayson

2018/03/29

6.9K3

0495-如何在CDH6.1中启用Kerberos

kerberos 专用宿主机访问管理

在前面的文章中，Fayson介绍了《0491-如何在Redhat7.4安装CDH6.1》，这里我们基于这个环境开始安装Kerberos。Kerberos是一个用于安全认证第三方协议，并不是Hadoop专用，你也可以将其用于其他系统，它采用了传统的共享密钥的方式，实现了在网络环境不一定保证安全的环境下，client和server之间的通信，适用于client/server模型，由MIT开发和实现。而使用Cloudera Manager可以较为轻松的实现界面化的Kerberos集成，本文Fayson主要介绍如何在Redhat7.4的CDH6.1环境中启用Kerberos。

Fayson

2019/01/03

1.8K1

如何在Kerberos环境下的CDH集群部署Spark2.1的Thrift及spark-sql客户端

kerberos spark sql

温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 Fayson的github： https://github.com/fayson/cdhproject 提示：代码块部分可以左右滑动查看噢 1.文档编写目的 ---- 在前面的文章Fayson介绍了《如何在CDH中启用Spark Thrift》,《如何在Kerberos环境下的CDH集群部署Spark1.6 Thrift及spark-sql客户端》，《如何在Kerberos环境下的CDH集群部署Spark2.1的Thrift及spark-sql

Fayson

2018/07/11

2.7K7

相似问题

安装了 JAVA多环境镜像还需要配置IIS环境吗？

1374

新手，请问购买服务器时选了操作需同+应用，还需要如何去配置环境？

3325

Linux系统怎样实现Kerberos主体名称与系统用户名的映射配置？

0558

kerberos缓存了hive用户没权限？

1639

配置环境教程以及一件安装包

1326

交个朋友

加入腾讯云技术交流站

洞悉AI新动向 Get大咖技术交流群

问spark2.2 kerberos环境，beeline为什么配置了principal，还需要用户名？

回答

安装了 JAVA多环境镜像还需要配置IIS环境吗？

新手，请问购买服务器时选了操作需同+应用，还需要如何去配置环境？

Linux系统怎样实现Kerberos主体名称与系统用户名的映射配置？

kerberos缓存了hive用户没权限？

配置环境教程以及一件安装包

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问spark2.2 kerberos环境，beeline为什么配置了principal，还需要用户名？

回答

安装了 JAVA多环境 镜像 还需要配置IIS环境吗？

新手，请问购买服务器时选了操作需同+应用，还需要如何去配置环境？

Linux系统怎样实现Kerberos主体名称与系统用户名的映射配置？

kerberos缓存了hive用户没权限？

配置环境教程以及一件安装包

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

安装了 JAVA多环境镜像还需要配置IIS环境吗？