hadoop

参考学习 https://github.com/apache/hive/blob/2b57dd27ad61e552f93817ac69313066af6562d9/ql/src/j…

深入理解 Hadoop （一）网络通信架构与源码浅析 深入理解 Hadoop （二）HDFS架构演进 深入理解 Hadoop （三）HDFS文件系统设计实现 深入理解 Hadoop…

⛄博主介绍：⚡全栈开发工程师，精通Web前后端技术、数据库、架构设计。专注于Java、Python、机器学习、大数据、爬虫等技术领域和小程序领域的开发，毕业设计、课程设计项目中主要…

文章目录 前言 认识hadoop，根据所学知识完成作业，并总结本学期心得体会。 一、认识hadoop 二、一课一得作业讲解 实现步骤 1. 搭建集群 2. 模拟生成新能源车辆数据编…

一、实验目的 熟练掌握常用的hadoop shell命令 二、实验内容    1.学习在开启、关闭Hadoop 2.学习在Hadoop中创建、修改、查看、删除文件夹及文件 3.学习…

HDFS 的常用命令 1.操作命令1.1 创建文件夹1.2 列出指定的文件和目录1.3 新建文件1.4 上传文件1.5 将本地文件移动到 HDFS1.6 下载文件1.7 查看文件1…

hive出现报错 Error: Error while processing statement: FAILED: Execution Error, return code 2 f…

题目：信息爬取字数统计及可视化 内容及要求： 配置Hadoop平台； 利用爬虫技术爬取任一门户网站新闻栏目一定时间段内的新闻信息，保存为一个或多个文件并上传到Hadoop平台以本人…

### README 本文是基于黑马程序员的 Hadoop 网课的前半部分整理的笔记，主要介绍了相关操作与组件架构。 视频网址：01-课程内容大纲与学习目标_哔哩哔哩_bilibi…

在sbin文件夹下是start-all.sh可以运行的，但是到了别的文件夹下就不行了，于是想到了是文件路径问题，因为hadoop环境是和java环境一起配置的导致sbin写成了bi…

目录 一、创建文件夹 二、查看指定目录下的内容 三、上传文件到HDFS指定目录下 四、查看HDFS文件内容 五、下载HDFS文件 六、拷贝HDFS文件 七、HDFS数据移动操作 八…

 1. 首先，需要准备maven的环境配置，我的idea是2021版本，（新版应该差不多） 下载maven的版本包，建议去官网下载Maven – Maven Releases Hi…

Hadoop3.X 完成分布式安装部署 需要三台虚拟机 所有相关安装包在Master节点的/opt/software目录下 解压到 /opt/module目录下 命令中要求使用绝对…

​ 文章目录 引言 1、准备环节 1.1设备基本要求 1.2安装包 2、修改相关信息 2.1修改ip 2.2修改ip映射 3、安装与部署 3.1.上传安装包 3.2.解压安装包 3…