Hive安装部署及简单测试 网页《一》
1.首先关闭机器上之前配置的分布式Hadoop
命令: (在hadoop的安装目录中) sbin/stop-dfs.sh
关闭: yarn 命令: sbin/stop-yarn.sh
2.先使用hadoop-senior.zuoyan.com 上的 伪分布式Hadoop进行配置 Hive (将需要的文件上传到服务器上)
2.1 启动 hdfs
2.2 启动yarn
2.3 将secondaryNamenode 停止掉 节省点内存 命令:sbin/hadoop-daemon.sh stop secondarynamenode
2.4 启动historyserver
命令: sbin/mr-jobhistory-daemon.sh start historyserver
3.将Hive的安装包进行解压
tar -zxvf apache-hive-0.13.1-bin.tar.gz -C /opt/modules/
更改一下名称:
mv apache-hive-0.13.1-bin/ hive-0.13.1
4.进入Hive解压目录中进行配置文件
4.1 更改文件名称 将 hive-env.sh.template 更改为hive.env.sh
4.2 设置Hadoop_Home 和Hive的conf
这个具体的目录 根据自己的实际情况来改
4.3查看dfs文件系统上的文件目录 创建 tmp 文件目录 和 /user/hive/warehouse(如果没有这个目录,默认创建的就是这个目录,用来存放Hive中的表)
创建dfs上的目录 命令 :
mkdir: Cannot create directory /user/hive/warehouse. Name node is in safe mode.
结果出现了意外 !!! Σ( ° △ °|||)︴
可以很明白的看见 在安全模式下
执行命令 :bin/hadoop dfsadmin -safemode leave 就可以解决这个问题,然后在创建文件目录
创建好文件目录后,就需要对这两个文件目录赋予权限
命令
bin/hdfs dfs -chmod g+x /tmp
bin/hdfs dfs -chmod g+x /user/hive/warehouse
查看一下权限 bin/hdfs dfs -ls -R /
5.打开Hive
使用命令: bin/hive
可以使用count(*) 命令来统计 ,可以查看出使用的就是yarn
- JavaScript 教程
- JavaScript 编辑工具
- JavaScript 与HTML
- JavaScript 与Java
- JavaScript 数据结构
- JavaScript 基本数据类型
- JavaScript 特殊数据类型
- JavaScript 运算符
- JavaScript typeof 运算符
- JavaScript 表达式
- JavaScript 类型转换
- JavaScript 基本语法
- JavaScript 注释
- Javascript 基本处理流程
- Javascript 选择结构
- Javascript if 语句
- Javascript if 语句的嵌套
- Javascript switch 语句
- Javascript 循环结构
- Javascript 循环结构实例
- Javascript 跳转语句
- Javascript 控制语句总结
- Javascript 函数介绍
- Javascript 函数的定义
- Javascript 函数调用
- Javascript 几种特殊的函数
- JavaScript 内置函数简介
- Javascript eval() 函数
- Javascript isFinite() 函数
- Javascript isNaN() 函数
- parseInt() 与 parseFloat()
- escape() 与 unescape()
- Javascript 字符串介绍
- Javascript length属性
- javascript 字符串函数
- Javascript 日期对象简介
- Javascript 日期对象用途
- Date 对象属性和方法
- Javascript 数组是什么
- Javascript 创建数组
- Javascript 数组赋值与取值
- Javascript 数组属性和方法
- Binary Search - 278. First Bad Version
- Design - 381. Insert Delete GetRandom O(1) - Duplicates allowed
- Design - 380. Insert Delete GetRandom O(1)
- DFS&BFS - 52. N-Queens II
- DFS&BFS - 51. N-Queens
- maze - dfs
- DFS&BFS - 130. Surrounded Regions
- Tree - 145. Binary Tree Postorder Traversal
- Tree - 94. Binary Tree Inorder Traversal
- Tree - 144. Binary Tree Preorder Traversal
- grpc调用主要流程分析(一)
- Array - 42. Trapping Rain Water Hard
- Go modules 简介
- Spring事务的传播行为
- String - 71. Simplify Path