首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

如何获取Hive正在执行或已结束的SQL语句

本文主要介绍两种方式来获取Hive正在执行或者已结束的的MapReduce作业的SQL语句,一种是通过MapReduce API获取执行作业的xml配置文件,另一种是通过Cloudera Manager...---- 1.通过YARN执行作业的xml配置文件 1.通过Hue执行SQL查询,Job Browser页面可以获取该SQL执行的ApplicationID,如下: image.png 2.通过ApplicationID...语句,该信息对应HDFS的 /user/$USER/.staging/$JOBID/job.xml文件 3.如果作业执行完成将接口改为JobHistory的API接口执行,执行如下: curl...语句,该信息对应HDFS的/user/history/done/2018/08/28/000000/job_1534299721148_0845_conf.xml文件 ---- 2.通过Cloudera...Manager 1.选择Yarn的“应用程序”->“Suggestions”->"Hive应用程序" image.png image.png 2.选择某个Hive作业,点击箭头可以展开查看完整的SQL

10K00
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    第07期:有关 MySQL 字符集的 SQL 语句

    本篇为理清字符集的续篇(上一篇:第06期:梳理 MySQL 字符集的相关概念),重点讲述字符集涉及到的 sql 语句用法。 一、character introducer 翻译过来就是字符引导。...as result; -- 那这条语句其实被 MySQL 解释为 select _utf8mb4 "北京加油❤!"...语法为: SET NAMES {'charset_name' [COLLATE 'collation_name'] | DEFAULT} 这条语句最常用,可是也最容易被滥用,比如语句: set names...coercibility | +--------------+ | 3 | +--------------+ 1 row in set (0.00 sec) 总结 对于字符集的控制相关 SQL...主要举例介绍了 MySQL 字符集相关的处理 SQL 语句,比如设置客户端相关编码语句:SET NAMES/SET CHARSET;设置排序规则语句:COLLATE;给 MySQL 信号的 introducer

    85810

    第45期:一条 SQL 语句优化的基本思路

    图片SQL 语句优化是一个既熟悉又陌生的话题。...面对千奇百怪的 SQL 语句,虽然数据库本身对 SQL 语句的优化一直在持续改进、提升,但是我们不能完全依赖数据库,应该在给到数据库之前就替它做好各种准备工作,这样才能让数据库来有精力做它自己擅长的事情...所以在我们 DBA 这侧,对 SQL 语句的优化简单来讲就是让我们自己写的 SQL 语句能更好的适应数据库内置的优化规则,进一步让 SQL 语句在每个处理阶段能扫描更少的记录数量、字段数量来改善查询效果...一般来讲,我们拿到一条“不是很优化”、“烂的”、“慢的” 等 SQL 语句(至于怎么拿到这条语句,不在本篇讨论范围),应该按照以下几个步骤来逐步分析:一、定位该SQL 语句涉及到的表结构,确认是磁盘表还是视图...接下来从SQL 语句层面来分析,比如这条SQL语句能否修改为更加优化的方式。可以考虑以下两点:SQL语句本身很简单,没有必要做修改。

    75730

    Mybatis 手撸专栏|第13章:通过注解配置执行SQL语句

    本文是《Mybatis 手撸专栏》的第13章,我们将继续完善我们的ORM框架,在之前基础上通过注解配置来执行SQL语句。...然而,这种方式需要手动编写大量的SQL语句,不够灵活和方便。在本章中,我们将通过注解配置来执行SQL语句,使代码更加简洁、可读性更高,提升开发效率。1....注解配置使用注解配置SQL语句可以将SQL语句直接和方法关联起来,简化了SQL的编写和维护。...动态SQL注解可以很方便地实现动态SQL语句的生成,根据不同的条件可以生成不同的SQL语句。...根据不同的条件,生成器会生成相应的SQL语句,并将其传递给数据库进行查询。结束语通过注解配置执行SQL语句,我们能够更加方便地编写和维护SQL语句,提升开发效率。

    50730

    如何获取Hive正在执行或者已结束的的MapReduce作业的SQL语句

    Fayson的github:https://github.com/fayson/cdhproject 提示:代码块部分可以左右滑动查看噢 1.文档编写目的 ---- 当我们提交Hive SQL语句到YARN...后,有时如果我们想监控某个SQL的执行情况,需要查看具体SQL语句,如果这个SQL语句比较长,无论是通过YARN的8088界面还是YARN的命令都无法看全这个SQL语句。...YARN的8088界面如下: [ccxvksbl6g.jpeg] 查看作业详情也无法看到完整SQL语句 [o46wotu42p.jpeg] yarn application -list同样无法看全SQL...语句,如下: [xxa06ijg1r.jpeg] 本文主要介绍三种方式来获取Hive正在执行或者已结束的的MapReduce作业的SQL语句,一种是通过MapReduce API获取执行作业的xml配置文件...测试环境 1.操作系统RedHat7.3 2.CM和CDH版本为5.13.1 3.集群已启用Kerberos 2.通过YARN执行作业的xml配置文件获取 ---- 1.使用fayson用户登录hue执行

    6.4K50

    Mybatis 手撸专栏|第16章:解析含标签的动态SQL语句

    Mybatis 手撸专栏 第16章:解析含标签的动态SQL语句 引言 欢迎来到Mybatis 手撸专栏!在本章中,我们将聚焦于解析含标签的动态SQL语句。...什么是含标签的动态SQL语句 在Mybatis中,我们可以使用含标签的动态SQL语句来根据条件灵活地构建SQL语句。...这样就实现了一个根据条件动态生成SQL语句的功能。 接下来,我们将通过一些常见的标签来详细说明如何解析含标签的动态SQL语句。 使用if标签 if标签用于根据条件动态地添加或删除SQL语句的一部分。...语句;如果age不为空,将会添加AND age = #{age}这部分SQL语句。...语句;如果age不为空,则将执行AND age = #{age}这部分SQL语句;如果name和age都为空,则将执行AND status = 'active'这部分SQL语句。

    41330

    day44_Oracle学习笔记_03

    十三、PL/SQL程序设计 PL/SQL(Procedure Language/Structured Query Language) 1、PL/SQL是一种高级数据库程序设计语言,专门用于在各种环境下对...该语言集成于数据库服务器中,所以PL/SQL代码可以对数据进行快速高效的处理。 2、PL/SQL是对SQL语言存储过程语言的扩展,是Oracle系统的核心语言。...学习PL/SQL程序的目的:   1、PL/SQL是Oracle对SQL语言的过程化扩展,操作效率更高。   ...2、PL/SQL在SQL命令语言中增加了过程处理语句(分支、循环等),使SQL语言具有过程处理能力。...SQL> 15.3、练习:限制每个部门只招聘10名员工,超过计划则报出错误信息 限制每个部门只招聘10名员工,超过计划则报出错误信息 ---------------------------------

    1.8K31

    Mybatis 手撸专栏|第9章:细化XML语句构建器,完善静态SQL解析

    本文为《Mybatis 手撸专栏》的第9章,将深入探讨如何在 Mybatis 中细化XML语句构建器,完善静态SQL解析的功能。...通过本章的学习,您将能够更好地理解并运用Mybatis中的XML语句构建器和静态SQL解析。1. XML语句构建器简介XML语句构建器是Mybatis中用于构建SQL语句的核心组件之一。...它通过读取XML配置文件中的语句定义,生成对应的SQL语句,并在运行时根据传入的参数动态替换占位符,最终生成可执行的SQL语句。...解析语句定义:构建器会解析XML配置文件中定义的语句,获取语句的类型、参数、SQL模板等信息。动态替换占位符:在运行时,构建器会根据传入的参数动态替换SQL语句中的占位符,生成完整的SQL语句。...生成可执行语句:构建器会将替换完成的SQL语句进行格式化和优化,并生成可执行的语句对象,供执行器使用。通过XML语句构建器,我们可以方便地定义和管理SQL语句,避免硬编码带来的麻烦。

    30430

    《Mybatis 手撸专栏》第9章:细化XML语句构建器,完善静态SQL解析

    与此同时也在语句构建器中,引入脚本语言驱动器,默认实现的是 XML语言驱动器 XMLLanguageDriver,这个类来具体操作静态和动态 SQL 语句节点的解析。...,核心逻辑类关系,如图 9-3 所示 图 9-3 XML 语句解析构建器,核心逻辑类关系 解耦原 XMLConfigBuilder 中对 XML 的解析,扩展映射构建器、语句构建器,处理 SQL 的提取和参数的包装...XMLStatementBuilder#parseStatementNode 方法是解析 SQL 语句节点的过程,包括了语句的ID、参数类型、结果类型、命令(select|insert|update|delete...脚本语言驱动 在 XMLStatementBuilder#parseStatementNode 语句构建器的解析中,可以看到这么一块,获取默认语言驱动器并解析SQL的操作。...这包括;映射构建器、语句构建器、源码构建器的综合使用,以及对应的引用;脚本语言驱动和脚本构建器解析,处理我们的 XML 中的 SQL 语句。

    40510

    一条sql语句的改进探索(r5笔记第70天)

    昨天同事找我,让我帮忙看两个sql问题,第一个问题是一个sql语句执行频率极高,但是目前的执行速度还是比较慢,希望我看看能不能调优一下。 另外一个问题是一个查询执行速度比较慢,但是执行频率不高。...第一个sql语句如下 5knr1ywqugtq8 /* TransactionLog_selectByAccRangeTrx_3 */ SELECT TRANSACTION_LOG.TRANS_DATE...从sql语句的执行和数据分布来看,还是合理的,没有什么问题。根据现在的执行情况,每次执行大约需要2秒以上。期望还是能够达到1秒以内甚至更低。...不过差别还是不大,我们还是用sql profile来看看能够给点什么建议。 很快生成了报告,可以看出,改进其实不大。大约只有不到20%的改进。...三来从这个语句来看,这个查询其实还是一个很简单的语句,没有关联表,使用了索引,查询条件也不复杂,调优的空间确实有限。就算退一步来看看使用另外一个索引,其实改进空间也是不大的。

    64880

    Oracle使用总结之异常篇

    当然了,PL/SQL编译错误不能通过PL/SQL异常处理来处理,因为这些错误发生在PL/SQL程序执行之前。.../SQL变量有不兼容行类型 ORA-6511 CURSOR-already-OPEN 试图打开一个已处于打开状态的游标 ORA-6530 Access-INTO-null 试图为null 对象的属性赋值...比如在有如下的PL/SQL程序: DECLARE namevarchar2(12):='EricHu'; 其它语句 BEGIN 其它语句 EXCEPTION WHEN OTHERS...THEN 其它语句 END; 例子中,由于Abc number(3)=’abc’; 出错,尽管在EXCEPTION中说明了WHEN OTHERS THEN语句,但WHEN OTHERS THEN也不会被执行...因为每个ORACLE错误都有一个号码并且在PL/SQL中异常通过名字处理,ORACLE提供了预定义的内部异常。如SELECT INTO 语句不返回行时产生的ORACLE异常NO_DATA_FOUND。

    2K60
    领券