分布式
-
2024.1.15 Spark 阶段原理,八股,面试题
目录 1. 简述什么是Spark? 2. 简述Spark的四大特点 3. 简述Spark比Mapreduce执行效率高的原因 4. 简述Spark on Yarn的两种部署模式的区…
-
Kafka的配置和使用
目录 1.服务器用docker安装kafka 2.springboot集成kafka实现生产者和消费者 1.服务器用docker安装kafka ①、安装docker…
-
Kafka数据清理指南
在本文中,我们将介绍如何使用Kafka进行数据清理。Kafka是一个高性能、分布式的流数据平台,常用于构建实时数据流应用程序。当我们在Kafka集群中处理大量的数据时,及时清理过期…
-
Spark编程实验二:RDD编程初级实践
目录 一、目的与要求 二、实验内容 三、实验步骤 1、pyspark交互式编程 2、编写独立应用程序实现数据去重 3、编写独立应用程序实现求平均值问题 4、三个综合实例 四、结果分…
-
【云平台技术】Hadoop全分布式安装与配置
目录 一、虚拟机安装 1、创建虚拟机 2、虚拟机启动初始化 二、 虚拟机克隆 三、Linux系统的网络配置 1、准备工作 2、 主机名和IP映射 2.1 配置主机名 2.2 配置…
-
XXL-Job快速入门+详细教程
XXL-Job快速入门+详细教程 1 概念 XXL-JOB是一个轻量级分布式任务调度平台 详细说明:XXL-JOB是一个任务调度框架,通过引入XXL-JOB相关的依赖,按照相关格式…
-
MPP架构和分布式架构的区别
目录 一、分布式架构和MPP架构分析 1.1分布式架构分析 1.2 MPP架构分析 1.2.1 MPP介绍 1.2.2 MPP架构发展历史 二、分布式架构和MPP架构的应用 2.1…
-
CentOS7本地部署分布式开源监控系统Zabbix并结合内网穿透实现远程访问
前言 Zabbix是一个基于WEB界面的提供分布式系统监视以及网络监视功能的企业级的开源解决方案。能监视各种网络参数,保证服务器系统的安全运营;并提供灵活的通知机制以让系统管理员快…
-
RabbitMQ 管理页面该如何使用
1. 概览 首先,这个 Web 管理页面大概就像下图这样: 首先一共有六个选项卡: Overview:这里可以概览 RabbitMQ 的整体情况,如果是集群,也可以查看集群中各个节…
-
阿里 P7 三面凉凉,kafka Borker 日志持久化没答上来
👏作者简介:大家好,我是爱敲代码的小黄,阿里巴巴淘天Java开发工程师,CSDN博客专家 📕系列专栏:Spring源码、Netty源码、Kafka源…
-
RabbitMQ安装教程(超详细)
本教程是在centos8下试验的,其实linux系统的都差不多 RabbitMQ官方:Messaging that just works — RabbitMQ RabbitMQ是开…
-
Zookeeper+Hadoop+Spark+Flink+Kafka+Hbase+Hive 完全分布式高可用集群搭建(保姆级超详细含图文)
说明: 本篇将详细介绍用二进制安装包部署hadoop等组件,注意事项,各组件的使用,常用的一些命令,以及在部署中遇到的问题解决思路等等,都将详细介绍。 1.环境说明 1.1 ip规…
-
RabbitMQ的五种常见消费模型
目录 引言 1. 简单队列模型(Simple Queue Model) 优缺点及适用场景 代码示例 2. 工作队列模型(Work Queue Model) 优缺点及适用场景 代码示…
-
KAFKA (2.12-2.2.1)常用命令和kafka tool 工具使用
KAFKA (2.12-2.2.1)常用命令 查看topic 查看所有topic列表 #集群地址以逗号分隔如 ip1:9092, ip2:9092, ip3:9092 ./kafk…
-
解决RabbitMQ启动报错:Job for rabbitmq-server.service failed because the control process exited with error
1、错误信息 在安装RabbitMQ的时候,发现不管是启动MQ服务还是重启MQ服务,都是报错,报错信息如下: 错误1:Failed to start RabbitMQ broker…
