计算机系统应用教程网站

网站首页 > 技术文章 正文

牛刀小试——Hive源码Debug全流程讲解

btikc 2024-10-12 10:58:34 技术文章 7 ℃ 0 评论

使用Hive执行HQL查询时遇到bug,解决办法无非几种,explain HQL、查看日志、远程Debug,本文就将详细讲解如何使用IDEA远程Debug。

1、Debug环境准备

1. 下载源码包

下载Hive源码包,自行编译一下,建议在Linux环境下编译,然后将整个编译好的包全部拷贝到IDEA工作目录中并使用IDEA打开。该文档是以Hive3.1.2版本作为讲解的。在资料包中提供了已经编译好的Hive源码包。

2. 打开项目配置项

3. 添加远程连接配置组

4. 添加配置信息

2、测试

1. 在CliDriver;类的run方法中随意打上断点

2. 开启Hive客户端的Debug模式

$HIVE_HOME/bin/hive–debug

3. 使用Debug模式启动本地项目

4. 在Hive客户端中执行HQL,切换到IDEA中查看

(1)在IDEA中查看断点

(2)在Hive Debug模式客户端查看


相关阅读:

Hive分区表和分桶表

Hive之数据仓库

Hive内部表与外部表的区别

HBase API操作与Hive的集成

Hive相关面试题知识点总结

本文暂时没有评论,来添加一个吧(●'◡'●)

欢迎 发表评论:

最近发表
标签列表