分布式
-
Hadoop分布式集群安装
上一篇大数据文章讲解了在单机上搭建Hadoop-Yarn 伪分布式集群的安装方法,方便大家学习,真实环境不可能只有一台机器,肯定是多节点的集群,大单位还会建设很多H…
-
【spark】
一、Spark是什么 Spark是一种基于内存的快速、通用、可扩展的大数据分析计算引擎。 Spark是基于Scala语言开发的。 整个Spark框架模块包含:Spark Core、…
-
消息中间件RabbitMQ
1. 消息队列 1.1. MQ 的相关概念 1.1.1. 什么是MQ MQ(message queue),从字面意思上看,本质是个队列,FIFO 先入先出,只不过队列中存放的内容是…
-
【RabbitMQ】死信(延迟队列)的使用
目录 一、介绍 1、什么是死信队列(延迟队列) 2、应用场景 3、死信队列(延迟队列)的使用 4、死信消息来源 二、案例实践 1、案例一 2、案例二(消息接收确认 ) 3、总结 一…
-
ERROR Fatal error during KafkaServer startup. Prepare to shutdown (kafka.server.KafkaServer) kafka.c
文章目录 问题描述: 原因分析: 解决方案: 方法一: 方法二: 问题描述: 开启 ZooKeeper 之后,准备启动 Kafka 服务,结果出现 ERROR Fatal erro…
-
聊聊kafka client性能调优及kafka最佳实践
这里是weihubeats,觉得文章不错可以关注公众号小奏技术,文章首发。拒绝营销号,拒绝标题党 背景 最近在使用kafka的时候遇到了一些性能问题。 所以就打算研究下kafka相…
-
【Hadoop】好用的脚本分享
知识目录 一、写在前面✨ 二、一键安装HA🍭 三、Hadoop一键启动🔥 四、一键启动可视化工具🍭 五、结语🔥 一、…
-
RabbitMQ解决消息丢失以及重复消费问题
文章目录 1、概念 2、基于ACK/NACK机制 2.1 基于Spring AMQP框架整合ACK/NACK机制 2.2 测试消费失败1.0 2.3 测试结果1.0 2.4 测试M…
-
RabbitMQ 消息队列使用
文章目录 MQ 同步调用和异步调用 RabbitMQ 基础概念 模型 简单队列 (Hello-World) 工作队列 (Work Queue) Pub/Sub (Fanout ex…
-
头歌大数据——HBase 伪分布式环境搭建
第1关:HBASE伪分布式环境搭建 编程要求 好了,到你啦,你需要先按照上次实训——HBase单节点安装的方式将HBase安装在/app目录下,然后根据本关知识配置好伪分布式的HB…
-
XXL-JOB详解(整合springboot)保姆级教程
文章目录 XXL-JOB简介 XXL-JOB是什么 为什么需要任务调度平台,而不用传统的 Timer 与 Quartz 为什么选择XXL-JOB,不选择elasticjob ==学…
-
Protobuf协议初级详解(python使用)从安装到序列化-反序列化
教程 一、前言 二、效果 三、教程 1)安装 2)使用 1.创建.proto文件 2.proto语法 3.protoc.exe文件编译.proto语法文件 4.序列化 5.反序列化…
-
一文让你学明白Hadoop《大数据技术之Hadoop》详细知识总结
思维导图: 一:Hadoop的简介 简介: Hadoop是由Apache基金会所开发的一个开源的分布式存储和处理大数据的框架,可以在计算机集群中进行大规模数据集的的存储和处理,并提…
-
windows环境下安装zookeeper
安装 下载地址:Apache Downloads 注意:zookeeper的安装路径不要有中文,建议也不要有空格 文件路径如下: 生成并修改zoo.cfg文件 复制zookeepe…
-
Couchbase高可用与分布式
1.背景介绍 1. 背景介绍 Couchbase是一款高性能、高可用、分布式的NoSQL数据库系统,基于Memcached和Apache CouchDB的技术。它具有强大的数据存储…
