搜索结果
查询Tags标签: Hive调优,共有 5条记录-
Hive常见时间日期函数的使用与问题整理
这里整理一下Hive常见的时间函数和日期函数和用法,作为平时数据处理过程的一个检索和记录。 平时在数据处理过程中,如果不经常使用时间函数,一时间遇到一些时间上的处理,难免会想不起来。 hive本身提供的时间函数已经很丰富了,基本上能满足我们所有的需求,一些特殊需…
2023/6/15 1:24:00 人评论 次浏览 -
Hive执行计划之只有map阶段SQL性能分析和解读
目录目录概述1.不带函数操作的select-from-where型简单SQL 1.1执行示例 1.2 运行逻辑分析 1.3 伪代码解释2.带普通函数和运行操作符的普通型SQL执行计划解读 2.1 执行计划解读 2.2 伪代码解释逻辑概述 可能所有的SQLboy刚接触SQL语句的时候都是select xxx from xxx where …
2023/6/13 18:52:52 人评论 次浏览 -
Hive执行计划之什么是hiveSQL向量化模式及优化详解
Hive开启向量化模式也是hiveSQL优化方法中的一种,可以提升hive查询速率,也叫hive矢量化。 问题1:那么什么是hive向量化模式呢? 问题2:hive向量化什么情况下可以被使用,或者说它有哪些使用场景呢? 问题3:如何查看hive向量化使用的相关信息? 1.什么是hive向量化模式…
2023/6/10 1:22:19 人评论 次浏览 -
Hive执行计划之hive依赖及权限查询和常见使用场景
目录概述 1.explain dependency的查询与使用2.借助explain dependency解决一些常见问题 2.1.识别看似等价的SQL代码实际上是不等价的: 2.2 通过explain dependency验证将过滤条件在不同位置的查询区别3.查看SQL操作涉及到的相关权限信息概述 Hive查看执行计划的命令中还有…
2023/6/8 1:22:42 人评论 次浏览 -
Hive执行计划之一文读懂Hive执行计划
目录概述 1.hive执行计划的查看 2.学会查看Hive执行计划的基本信息 3.执行计划步骤操作过程 4.explain extended概述 Hive的执行计划描述了一个hiveSQL语句的具体执行步骤,通过执行计划解读可以了解hiveSQL语句被解析器转换为相应程序语言的执行逻辑。通过执行逻辑可以知…
2023/6/7 1:22:30 人评论 次浏览