网站首页 > 技术文章 正文
Hive安装及配置
hive是基于Hadoop的一个数据仓库工具,用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive数据仓库工具能将结构化的数据文件映射为一张数据库表,并提供SQL查询功能,能将SQL语句转变成MapReduce任务来执行。
安装前基本环境准备:
- JDK 1.8
- 修改master/s1/s2主机名及别名
- 关闭防火墙
- 关闭SELinux
- 配置ssh免密码登录
- 启动Hadoop集群及zookeeper
以上基础环境请参考【IT小乙班】的文章:Linux系统部署hadoop集群超详细版
1、官网下载hive
#https://hive.apache.org/downloads.html
2、解压安装
#tar zxvf apache-hive-2.3.3-bin.tar.gz -C /usr/local
#mv apache-hive-2.3.3-bin hive
3、配置环境变量
vim /etc/profile
4、查看版本信息
5、配置Hive(/usr/local/hive/conf)
#vim hive-sit.xml
数据库连接到本地198数据库,这里不在安装MySQL数据库,注意:最好新建一个hive-site.xml,按照我上述的配置即可,请勿在拷贝和修改配置可能导致数据库无法创库Hive
6、修改配置文件
修改hive-env.sh文件添加
7、mysql-connect驱动包,将jar复制到hive的lib目录下
mysql-connector-java-5.1.40-bin.jar
mysql-connector-java-5.1.46.jar
移动至此目录中 /usr/local/hive/lib/
8、初始化及测试
初始化:bin/schematool -dbType mysql -initSchema
会在mysql自动生成hive库
返回198数据库查看是否有Hive库和表信息
9、启动:bin/hive
原创声明:本文章是本人在今日头条的原创内容,如需转载请注明来源和原作者。
大家如果在头条号有电脑日常问题,可以在下方评论,看到后会第一时间回复大家。
作者: IT小乙班
关注【IT小乙班】头条号,每天收获最实战的电脑技能干货。
如果你喜欢我的文章,不妨点赞、转发、收藏一下哦!
猜你喜欢
- 2024-10-12 大数据分析工具——hive入门 hive数据分析的一般流程是什么
- 2024-10-12 019Hive基本使用03 019Hive基本使用03 #liaoit
- 2024-10-12 手把手教你搭建Hive环境 搭建hive集群
- 2024-10-12 0474-如何使用SQL Developer访问Hive
- 2024-10-12 大数据之-HIVE入门(十四) php hive大数据处理
- 2024-10-12 Hive 迁移参考方案及测试(下) hive表迁移
- 2024-10-12 0263-Hive2.2.0如何与CDH集群中的Spark1.6集成
- 2024-10-12 如何在HUE上通过oozie调用Hive SQL工作流
- 2024-10-12 百度二面:你做过哪些Hive调优啊? hive调优与参数设置
- 2024-10-12 HiveSQL:如何从给定的日期中减去指定数量的天数?
你 发表评论:
欢迎- 最近发表
- 标签列表
-
- oraclesql优化 (66)
- 类的加载机制 (75)
- feignclient (62)
- 一致性hash算法 (71)
- dockfile (66)
- 锁机制 (57)
- javaresponse (60)
- 查看hive版本 (59)
- phpworkerman (57)
- spark算子 (58)
- vue双向绑定的原理 (68)
- springbootget请求 (58)
- docker网络三种模式 (67)
- spring控制反转 (71)
- data:image/jpeg (69)
- base64 (69)
- java分页 (64)
- kibanadocker (60)
- qabstracttablemodel (62)
- java生成pdf文件 (69)
- deletelater (62)
- com.aspose.words (58)
- android.mk (62)
- qopengl (73)
- epoch_millis (61)
本文暂时没有评论,来添加一个吧(●'◡'●)