hive
-
大数据——数据从Hive导入MySQL
前言 首先，Hive MySQL Hadoop 要确保没问题，若有小伙伴对这个有疑问，可以在评论区提问 其次在Hive中要有一组数据来完成这一次的数据导入 下面我们进入实操环节 叮…
-
【hive-design】hive架构详解：描述了hive架构，hive主要组件的作用、hsql在hive执行过程中的底层细节、hive各组件作用
文章目录 一. Hive Architecture 二. Metastore 1. Metastore Architecture 2. Metastore Interface 三….
-
2023.11.16-hive sql高阶函数lateral view,与行转列,列转行
目录 0.lateral view简介 1.行转列 需求1: 需求2: 2.列转行 解题思路: 0.lateral view简介 hive函数 lateral view 主要…
-
【Hive
1、 计算资源配置 1.1 Yarn资源配置 1.2 MapReduce资源配置 2、 Explain查看执行计划（重点） 2.1 Explain执行计划概述 2.2 基本语法 2…
-
[hive] 在hive sql中定义变量
在Hive SQL中，可以使用SET命令来定义变量。 变量可以用于存储和引用常量或表达式的值，以便在查询中重复使用。 下面是定义和使用变量的示例： — 定义一个变量 SET my…
-
hive查看数据库出现org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
FAILED: HiveException java,lang.RuntimeException: Unable to instantiate org.apache.hadoop….
-
Hive创建分区表并插入数据
业务中经常会遇到这种需求：数据每天全量更新，但是要求月底将数据单独保存一份以供后期查询某月节点的信息。这时就要考虑用到Hive的分区表实现，即按照月份创建分区表，相当于新的月份数据…
-
【dbeaver】win环境的kerberos认证和Clouders/cdh集群中Kerberos认证使用Dbeaver连接Hive、Impala和Phoenix
一、配置Mit kerberos 1.1 下载安装MIT KERBEROS客户端 MIT KERBEROS 下载较新的版本即可。 下载之后一路默认安装即可。注意：不要修改软件安装位…
-
[hive] 窗口函数 ROW
文章目录 `ROW_NUMBER() ` 示例 窗口函数 ROW_NUMBER() 在 Hive SQL 中，ROW_NUMBER()是一个用于生成行号的窗口函数。 它可以为查询结…
-
三种SQL实现聚合字段合并（presto、hive、mysql）
需求：按照项目名，以逗号合并参与人 presto select item_name ,array_join(array_agg(name),’,’) as group_name f…
-
数仓工具—Hive进阶之StorageHandler(23)
Storage Handler 引入Storage Handler，Hive用户使用SQL的方式读写外部数据源, 例如ElasticSearch、 Kafka、HBase等数据源的…
-
基于hadoop+hive的全国天气大数据可视化平台
【大数据分析毕设之S2023102基于Hadoop+hive的全国天气大数据分析可视化平台（hive+sqoop+hdfs+E chart）】 https://www.bilibi…
-
Hive01
Hive的安装 上传安装包 解压 tar zxvf apache-hive-3.1.2-bin.tar.gz mv apache-hive-3.1.2-bin hive 解决Hiv…
-
5. Hive的三种去重方法
文章目录 Hive的三种去重方法 1. distinct 2. group by 3. row_number() 4. 三者的效率对比 参考链接 Hive的三种去重方法 1. di…
-
Presto的介绍、使用和原理架构
文章目录 简介 介绍 优缺点 Presto和hive的对比 Presto、Impala性能比较 原理 架构 整体架构 sql执行步骤 具体分析 资源和调度 查询调度 **资源管理*…
