hadoop
-
Hadoop学习笔记(HDP)-Part.14 安装YARN+MR
目录 Part.01 关于HDP Part.02 核心组件原理 Part.03 资源规划 Part.04 基础环境配置 Part.05 Yum源配置 Part.06 安装Oracl…
-
Flink 实时数仓 (一) ——— 数据采集层
目录 一、数仓分层介绍 二、实时需求概览 三、统计架构分析 四、日志数据采集 1. 模拟日志生成器的使用 2. 日志采集模块-本地测试 3. 日志采集模块-打包单机部署 五、业务数…
-
【大数据进阶第三阶段之DolphinScheduler学习笔记】DolphinScheduler(海豚调度)的部署指南
部署 参考官网部署方式:https://dolphinscheduler.apache.org/zh-cn/docs/3.1.3/guide/installation/standa…
-
大数据毕业设计选题推荐-系统运行情况监控系统-Hadoop-Spark-Hive
✨作者主页:IT毕设梦工厂✨ 个人简介:曾从事计算机专业培训教学,擅长Java、Python、微信小程序、Golang、安卓Android等项目实战。接项目定制开发、代码讲解、答辩…
-
初识Hadoop-概述与关键技术
一.大数据概述 1.什么是大数据 高速发展的信息时代,新一轮科技革命和变革正在加速推进,技术创新日益成为重塑经济发展模式和促进经济增长的重要驱动力量,而“大数据”无疑…
-
大数据 – Hadoop系列《三》- HDFS(分布式文件系统)概述
🐶5.1 hdfs的概念 HDFS分布式文件系统,全称为:Hadoop Distributed File System。 它是一个文件系统,用于存储文件,通过目录树…
-
xslx表格文件采集到hdfs流程&hdfs数据 load到hive表
xslx表格文件采集到hdfs 咱们就是说,别的话不多说,直接开始实操 xslx在win系统上,打开后另存为csv文件格式,上传到linux系统中。(注意下编码格式,不然后面就是中…
-
最近怎么流量涨这么多?那我开始讲Hive特性了!
Hive架构原理 a.用户接口:Client CLI(Hive shell)、JDBC/ODBC(java访问hive)、Hive WEBUI(浏览器访问hive)和Thrift服…
-
DBeaver连接hive
1.新建hive连接 其中主机填写hive所在节点地址,端口10000为默认,数据库名不填则是默认default数据库,用户名密码填写hadoop集群中能操作hdfs的用户和密码。…
-
esProc SPL为何备受青睐,Hadoop Spark 太重?
📢📢📢📣📣📣 哈喽!大家好,我是【IT邦德】,江湖人称jeames007,10年DB…
-
Hive基础知识(九):Hive对数据库表的增删改查操作
1. 创建表 1)建表语法 CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name #EXTERNAL:外部的 [(col_name …
-
hdfs常用端口号、常用配置文件,集群时间同步
目录 常用端口号 hadoop3.x HDFS NameNode 内部通常端口:8020/9000/9820 HDFS NameNode 对用户的查询端口:9870 历史服务器:1…
-
Sqoop数据迁移工具
概述 Apache Sqoop(SQL-to-Hadoop)项目旨在协助RDBMS与Hadoop之间进行高效的大数据交流。用户可以在 Sqoop 的帮助下,轻松地把关系型数据库的数…
-
Hadoop HBASE 单节点版腾讯云安装
文章目录 一、部署环境安装说明 1. HBASE和JDK版本对应关系 2. HBASE和Hadoop版本对应关系 3. 预先声明 二、配置Hadoop安装环境 2.1. 设置免密 …
-
【运维】hive 高可用详解: Hive MetaStore HA、hive server HA原理详解;hive高可用实现
文章目录 一. hive高可用原理说明 1. Hive MetaStore HA 2. hive server HA 二. hive高可用实现 1. 配置 2. beeline链接…
