Hive安装与操作

发布时间:2022-06-27 发布网站:脚本宝典
脚本宝典收集整理的这篇文章主要介绍了Hive安装与操作脚本宝典觉得挺不错的,现在分享给大家,也给大家做个参考。

一.安装Hive

  1. 下载解压重命名权限

Hive安装与操作

       2. 配置环境变量  $HIVE_HOME

Hive安装与操作

       3. 修改Hive配置文件 gedit

Hive安装与操作

 

 

 

Hive安装与操作

       4.配置MySQL驱动

                a.下载合适版本的mySQL jar包,拷贝到/usr/local/hive/lib目录下 ls

Hive安装与操作

Hive安装与操作

 

 

 

Hive安装与操作

                b.在mysql新建hive数据库 show databases;

Hive安装与操作

                c.配置mysql允许hive接入  show grants for 'hive'@'localhost';

Hive安装与操作

      5.启停

               a.启动Hadoop--启动Hive--退出Hive--停止Hadoop

Hive安装与操作

 

 

 

Hive安装与操作

 

 

 

二、Hive操作

         1.hive创建与查看数据库 

Hive安装与操作

         2.mysql查看hive元数据表DBS

Hive安装与操作

         3.hive创建与查看表

Hive安装与操作

         4.mysql查看hive元数据表TBLS

Hive安装与操作

         5.hDFs查看表文件位置

Hive安装与操作

         6.hive删除表

Hive安装与操作

         7.mysql查看hive元数据表TBLS

Hive安装与操作

         8.hive删除数据库

Hive安装与操作

         9.mysql查看hive元数据表DBS 

Hive安装与操作

三、hive进行词频统计

   0. 为什么要使用Hive?

操作接口采用类SQL语法,提供快速开发的能力。避免了去写Mapreduce,减少开发人员的学习成本。功能扩展很方便。

Ø  可扩展

Hive可以自由的扩展集群的规模,一般情况下不需要重启服务。

Ø  延展性

Hive支持用户自定义函数,用户可以根据自己的需求来实现自己的函数。

Ø  容错

良好的容错性,节点出现问题SQL仍可完成执行。

   1.准备txt文件

Hive安装与操作

   2.启动hadoop,启动hive

@H_406_190@

   3.创建并查看文本表  create table

Hive安装与操作

   4.导入文件的数据到文本表中 load data local inpath

Hive安装与操作

Hive安装与操作

   5.分割文本 splIT

Hive安装与操作

 

Hive安装与操作

   6.行转列explode

Hive安装与操作

   7.统计词频group by

 

Hive安装与操作

 

8.准备txt文件

 

Hive安装与操作

 

 

9.上传文件至hdfs

Hive安装与操作

 

 

10.从hdfs导入文件内容到表wctext, 并查看hdfs文件,hfds数据库文件

 

Hive安装与操作

 

 

11.统计词频

Hive安装与操作

 

 

12词频统计结果存到数据表里,并查看表和文件

Hive安装与操作

 

 

13.本地调用本地hql文件进行词频统计,将结果保存为本地文件

Hive安装与操作

 

 

14.退出hive,停止hadoop

脚本宝典总结

以上是脚本宝典为你收集整理的Hive安装与操作全部内容,希望文章能够帮你解决Hive安装与操作所遇到的问题。

如果觉得脚本宝典网站内容还不错,欢迎将脚本宝典推荐好友。

本图文内容来源于网友网络收集整理提供,作为学习参考使用,版权属于原作者。
如您有任何意见或建议可联系处理。小编QQ:384754419,请注明来意。