hive
-
Hive数据库：嵌入、本地、远程全攻略（下）
先介绍一下本地模式和远程模式： 当使用本地模式时，Hive将其元数据存储在本地数据库（例如MySQL）中，使其成为一个独立的数据处理系统。在本地模式中，Hive的配置文件（hive…
-
Hive复杂数据类型(array类型、map类型、struct类型)
目录 一、array类型 1.查询array内包含的指定词信息 2.查询array中元素的个数 3.查询array内指定序号信息 …
-
Zookeeper+Hadoop+Spark+Flink+Kafka+Hbase+Hive
说明 Zookeeper+Hadoop+Spark+Flink+Kafka+Hbase+Hive 完全分布式高可用集群搭建 下载 https://archive.apache.or…
-
基于大数据的城市交通数据可视化分析系统
大家可以帮忙点赞、收藏、关注、评论啦 👇🏻👇🏻👇🏻 精彩专栏推荐订阅：在 下方专栏 …
-
SparkSQL和Hive语法差异
SparkSQL和Hive语法差异 1、仅支持Hive SparkSQL关联条件on不支持函数rand() 创建零时表时，Spark不支持直接赋值null Spark无法读取字段类…
-
hive语法
DDL 1.数据库操作 （1）创建库 create database db_hive1; （2）显示库 show databases; show database like …
-
hive框架与数据类型
hive Hive是一个基于Hadoop的数据仓库工具，它提供了类似于SQL的查询语言HiveQL来查询和分析大规模数据。Hive将结构化的数据文件映射为一张数据库表，并提供了SQ…
-
使用 PySpark 进行数据清洗与 JSON 格式转换的实践详解（保姆级编码教程）
在大数据处理中，PySpark 提供了强大的工具来处理海量数据，特别是在数据清洗和转换方面。本文将介绍如何使用 PySpark 进行数据清洗，并将数据格式转换为 JSON 格式的实…
-
Hive中left join 中的where 和 on的区别
目录 一、知识点 二、测试验证 三、引申 前言 数仓实际开发中经常会涉及到多表关联，这个时候就会涉及到on与where的使用。因此本篇文章主要阐述on 和 where之间的区…
-
HiveServer2 常见异常和处理方法
1. Connection timed out java.sql.SQLException: Could not open client transport with JDBC U…
-
【hive-解决】HiveAccessControlException Permission denied: CREATEFUNCTION
文章目录 一.任务描述 二. 解决 一.任务描述 Error while compiling statement: FAILED: HiveAccessControlExcepti…
-
seatunnel-2.3.2 doris数据同步到hive(cdh-6.3.2)首次运行踩坑记录
seatunnel-2.3.2 doris数据同步到hive(cdh-6.3.2)首次运行报错解决，解决的报错如下： 1、java.lang.NoClassDefFoundErro…
-
Sqoop 安装配置（超详细）
文章目录 1.下载 2.解压 3.添加环境变量 4.配置 Sqoop 环境变量文件 5. MySQL 驱动 6. 拷贝 Hive 文件 7.验证 8.去除警告信息 9. Sqoop…
-
Hive DDL语法
Hive的语法和MySQL大部分都相同 一、数据库操作 1.1、创建数据库 CREATE DATABASE [IF NOT EXISTS] database name [COMME…
-
Hive引擎MR、Tez、Spark
Hive引擎包括：默认MR、Tez、Spark 不更换引擎hive默认的就是MR。 MapReduce：是一种编程模型，用于大规模数据集（大于1TB）的并行运算。 Hive on …
