hive

一、区间筛选 BETWEEN AND语句是Hive中常用的区间筛选语句，可以用来筛选出所有在指定区间内的数据。 SELECT column1, column2, … FROM …

一、什么是Hive with Hive with语句是一种查询优化技术，允许开发人员在SQL查询中定义临时表或子查询。这些临时表或子查询可以被后续的查询引用，从而提高查询性能。 使…

一、数组定义与操作 在hive中，数组的定义格式为array<data_type>，其中data_type为数组中每个元素的数据类型。数组可以通过两种方式进行创建：使用…

Hive是一个基于Hadoop的数据仓库工具，为了方便对大量结构化数据的管理和处理，Hive提供了一些SQL函数。其中，coalesce函数就是最常用的函数之一。本文将从多个角度对…

一、基本概念 Hive是一个基于Hadoop的数据仓库工具，它能够将结构化的数据文件映射为一张表，并提供了类SQL语句进行数据查询、分析等操作。字符串拼接是Hive中常用的操作之一…

一、什么是 Hive 分位数 Hive 是基于 Hadoop 的数据仓库工具，支持 SQL-Like 的查询语言，是 Hadoop 大数据处理领域最流行的工具之一。 Hive 分位…

一、概述 HBase和Hive都是大数据处理领域的常见工具，二者都是基于Hadoop的生态系统，并且都支持Hadoop分布式文件系统（HDFS）作为底层存储。 二、HBase与Hi…

一、什么是Hive not exists Hive not exists是一种SQL语句中常见的一种写法，用来查询一个表中不存在于另一个表中的记录。它通常和SELECT、FROM、…

一、Hive基本概念 Hive是一个基于Hadoop的数据仓库工具，能够将结构化的数据文件映射为一张数据库表，并提供SQL查询功能。 Hive表的数据可以来自于HDFS、本地文件系…

一、Hive分桶 Hive桶表分成不同部分（Bucket）是一种常见的优化技巧，它适用于需要大量聚合操作的场景。如果在没有分桶的情况下执行聚合操作，Hive必须扫描整个表才能完成聚…

一、Hive列转行函数map Hive列转行函数map的作用是将Map类型的列拆成多行，每一行对应Map中的一个键值对。这个函数会返回两个列，一个列包含键，一个列包含值。 SELE…

一、概述 Metastore是Hive表的元数据存储仓库，它是一个独立的进程，处理包括表名、列名、数据类型和表的存储位置在内的各种元数据。 Metastore 可能是独立的进程，也…

一、 group by的概念 group by是SQL中非常重要的一个查询方式，它可以将表中的数据根据指定的列进行分组，然后对每个组进行聚合操作，例如count、sum、avg、m…

一、Hive-exec概述 Apache Hive是一个基于Hadoop的数据仓库系统，可以将结构化和半结构化的数据以类SQL方式进行查询和分析。而Hive-exec是对Hive执…

一、原因分析 1、数据不均匀。 Hive数据倾斜通常是由于数据不均匀引起的，也就是说，有些分区、某些列、一些键，被频繁访问，导致在这些数据上的任务无法平均分布到所有worker节点…