Hive源码解读 - 文集

Hive源码解读

9篇文章 · 8400字 · 1人关注

Hive元数据升级工具源码剖析——HiveSchemaTool
1 背景随着公司业务的井喷式发展，数仓元数据也日益庞大，尤其是存在很多设计不合理的大分区表，导致一些元数据表（如PARTITIONS，PART...

0.1 2747 0 1
记一次Hive任务hang住的问题(2)
1 背景线上Hive任务偶尔出现hang住的现象.经排查确认是触发了Hive的bug, 该bug在Hive-10569(https://iss...

0.3 1456 0 3

记一次端口不释放的问题
1 背景一台服务器的端口数是有限的资源，如果端口被大量占用则会存在未知的故障。案例：线上HiveServer2发生故障: 大量任务hang住,...

5.1 1699 0 4
记一次Hive任务hang住的问题(1)
1 问题背景 beeline偶尔出现任务进程卡住, 长时间等待无响应的情况.下面尝试进行分析及定位代码位置. 2 分析步骤 2.1 首先定位进程...

0.1 660 0 1
Hive主要模块及调用关系
Hive主要模块及调用关系 Hive工作原理 Hive的编译器编译器主要有这么几个模块：Parser，SemanticAnalyzer，Log...

0.2 2476 5 3
Hive源码解读（4）命令处理器（CommandProcessor）
在前文中，我们知道命令的执行最终是由命令处理器CommandProcessor的run方法来完成的，命令处理器的构建采用设计模式中的工厂模式。命...

0.3 1423 1 3
Hive源码解读（3）命令行交互界面（Command Line Interface）
命令行界面，是Hive中很重要的一个服务，也是我们在使用hive的过程中使用最频繁的服务。 Cli入口类在哪里？如果你读了前面的几篇文章，细心...

0.4 1229 0 3

Hive源码解读（2）shell脚本解读
在上文中我们得知，Hive的入口脚本都在bin/etc目录下，启动hive客户端的过程就是通过这些脚本启动的。细心一点的话，我们在hive脚本中...

0.4 1472 0 4
Hive源码解读（1）解读前的分析
用什么工具？工具随便，你那个顺手用那个，不过我相信应该没有大神选用纯文本编辑器，如果你真用了，请私信我，我将献上我的膝盖。这里我推荐intel...

0.6 3247 0 5