hive

        在Hive中建表成功之后，就会在HDFS上创建一个与之对应的文件夹，且文件夹名字就是表名； 文件夹父路径是由参数hive.metastore.warehouse.d…

目录 版本信息 操作记录 安装datahub v0.10.0 datahub 快速部署 元数据摄取 通过sqlline获取指定sql文件中HiveSQL的字段级血缘关系，并将结果提…

文章目录 一、函数 1.1 函数简介 1.2 单行函数 1.2.1 算术运算函数 1.2.2 数值函数 1.2.3 字符串函数 1.2.4 日期函数 1.2.5 流程控制函数 1….

文章目录 问题：SemanticException Unable to determine if hdfs://node1:8020/user/hive/warehouse/t_s…

文章目录 一、collect_set()/collect_list() 二、实际运用 把同一分组的不同行的数据聚合成一个行 用下标可以随机取某一个 聚合后的中的值用‘|’分隔开 使…

今天向分区表插入数据 insert into table——–的时候 执行完报错了:FAILED: Execution Error, retur…

配置Hive使用Spark执行引擎 Hive引擎 概述 兼容问题 安装Spark Spark配置 Hive配置 HDFS上传Spark的jar包 执行测试 速度对比 Hive引擎 …

文章目录 简介 概述 作用 特性 数据存储、计算引擎插件化 实时流批一体 数据表演化（Table Evolution） 模式演化（Schema Evolution） 分区演化（Pa…

1、使用distinct去重 distinct用来查询不重复记录的条数，用count(distinct id)来返回不重复字段的条数。用法注意： distinct【查询字段】，必须…

文章目录 零、学习目标 一、导言 二、内部表 1.1 什么是内部表 1.1.1 内部表的定义 1.1.2 内部表的关键特性 1.2 创建与操作内部表 1.2.1 创建并查看数据库 …

目录 一、分区表 1.新建分区表 2.向分区表插入数据 1.静态分区 2.动态分区 3.创建多级分区 二、分桶表 1.新建原表 2.建立分桶表并按照sid排序 3.向分桶表插入数据…