0791-5.13.1-Hive视图执行show create table被截断异常分析
时间:2022-07-22
本文章向大家介绍0791-5.13.1-Hive视图执行show create table被截断异常分析,主要内容包括其使用实例、应用技巧、基本知识点总结和需要注意事项,具有一定的参考价值,需要的朋友可以参考一下。
作者:Eric Lin (林晨辉), Cloudera高级售后技术支持工程师。
异常重现
当对Hive的VIEW执行SHOW CREATE TABLE时,结果输出只有部分,会被截断,这个表现在Hue,Beeline以及Hive CLI中都会存在,如下所示。
1.通过Hue
2.通过Beeline
0: jdbc:hive2://localhost:10000/default> SHOW CREATE TABLE test_view;
+------------------------------------+--+
| createtab_stmt |
+------------------------------------+--+
| CREATE VIEW `test_view` AS SELECT |
| |
| FROM `default`.`sample_07` |
+------------------------------------+--+
3.通过Hive CLI
hive> SHOW CREATE TABLE test_view;
OK
CREATE VIEW `test_view` AS SELECT
FROM `default`.`sample_07`
故障解决
经过对各种CDH版本的研究和测试后,发现问题是由VIEW的create语句中带有“ t”字符引起的,并且仅在5.13.1之前的CDH版本中存在。输出结果会删除“t”后的所有字符。从CDH5.13.1开始,Hive在保存元数据信息到数据库MySQL之前,会删掉空格,所以不会出现该问题。但是在低版本的CDH中如果已经出现了该问题,仅升级CDH是不能解决的,因为Metastore中的数据不会更改。要解决该问题,需要更新Hive元数据库中的信息,具体操作如下:
1.停止Hive服务,这样阻止了对Hive元数据库的后续操作;
2.使用mysqldump命令将整个MySQL数据库dump成文本文件;
3.使用文本编辑器将TBLS表中所有“tab”替换为空格;
4.直接drop掉MySQL中旧的Hive元数据库;
5.使用修改好的dump文件加载到新创建的Hive元数据库中;
6.重启服务然后检查是否问题修复;
最好现在DEV/TEST环境中进行测试,然后再到生产系统中进行变更,以降低对生产系统的影响。
参考:
https://www.ericlin.me/2017/12/show-create-table-output-truncated-for-view-in-hive/
- JavaScript 教程
- JavaScript 编辑工具
- JavaScript 与HTML
- JavaScript 与Java
- JavaScript 数据结构
- JavaScript 基本数据类型
- JavaScript 特殊数据类型
- JavaScript 运算符
- JavaScript typeof 运算符
- JavaScript 表达式
- JavaScript 类型转换
- JavaScript 基本语法
- JavaScript 注释
- Javascript 基本处理流程
- Javascript 选择结构
- Javascript if 语句
- Javascript if 语句的嵌套
- Javascript switch 语句
- Javascript 循环结构
- Javascript 循环结构实例
- Javascript 跳转语句
- Javascript 控制语句总结
- Javascript 函数介绍
- Javascript 函数的定义
- Javascript 函数调用
- Javascript 几种特殊的函数
- JavaScript 内置函数简介
- Javascript eval() 函数
- Javascript isFinite() 函数
- Javascript isNaN() 函数
- parseInt() 与 parseFloat()
- escape() 与 unescape()
- Javascript 字符串介绍
- Javascript length属性
- javascript 字符串函数
- Javascript 日期对象简介
- Javascript 日期对象用途
- Date 对象属性和方法
- Javascript 数组是什么
- Javascript 创建数组
- Javascript 数组赋值与取值
- Javascript 数组属性和方法
- 【python-leetcode102-树的宽度遍历】二叉树的层次遍历
- 【python-树的宽度遍历】二叉树的反向层次遍历
- 基于TypeScript封装Axios笔记(二)
- redis高性能数据结构之有序集
- spring之通过静态工厂方法配置Bean
- 【python-leetcode107-树的宽度遍历】二叉树的层次遍历Ⅱ
- spring之通过注解方式配置Bean(一)
- React17新特性:启发式更新算法
- spring之通过FactoryBean配置Bean
- 谱聚类的python实现
- 基于TypeScript封装Axios笔记(三)
- hadoop伪分布式之启动HDFS并运行MR程序(WordCount)
- 细品Reids的HyperLogLog数据结构
- 布隆过滤器与缓存击穿
- spring之通过注解方式配置Bean(二)