分布式
-
【头歌实训】Spark 完全分布式的安装和部署(新)
文章目录 第1关: Standalone 分布式集群搭建 任务描述 相关知识 课程视频 Spark分布式安装模式 主机映射 免密登录 准备Spark安装包 配置环境变量 修改 sp…
-
大数据开源框架环境搭建(五)——Hbase完全分布式集群的安装部署
目录 实验环境: 实验步骤: 〇、Zookeeper安装配置: 一、安装前注意事项 二、HBase安装 三、Hbase集群配置 1.配置hbase-env.sh文件,位于Hbas…
-
kafka 开启认证授权
前言 1、前面自己写了一篇关于各个环境各个模式的安装的文章,大家可以去看看 kafka各种环境安装(window,linux,docker,k8s),包含KRaft模式 2、使用版…
-
Kafka快速入门(最新版3.6.0)
文章目录 一、初识MQ 1.1 什么是MQ 1.2 同步和异步通讯 1.1.1 同步通讯 1.1.2 异步通讯 1.3 技术对比 1.4 MQ的两种模式 二、初识Kafka 2.1…
-
运行kafka控制台报错:Topic XXX not present in metadata after 60000 ms.解决
kafka消息队列项目运行后报org.springframework.kafka.KafkaException: Send failed; nested exception is …
-
Kafka用法总结
Kafka用法总结 一、Kafka是什么 Kafka是一个分布式的基于发布/订阅模式的消息队列(Message Queue),主要应用于大数据实时处理领域。 二、消息队列 消息队列…
-
解决Windows安装Rabbitmq,运行rabbitmqctl status命令时报错unable to perform an operation on node ‘rabbit@…的方法
一、问题分析 可能是rabbitqm服务出错导致的问题,如果安装过程没问题,就是运行rabbitmqctl status命令时报错,那可能是环境变量没有设置对,根据我本人的情…
-
【Hadoop】执行start-dfs.sh启动hadoop集群时,datenode没有启动怎么办
执行start-dfs.sh后,datenode没有启动,很大一部分原因是因为在第一次格式化dfs后又重新执行了格式化命令(hdfs namenode -format),这时主节点…
-
springboot kafka 实现延时队列
好文推荐: 2.5万字详解23种设计模式 基于Netty搭建websocket集群实现服务器消息推送 2.5万字讲解DDD领域驱动设计 文章目录 一、延时队列定义 二、应用场景 三…
-
rabbitmq和rocketmq区别
RabbitMQ和RocketMQ是两个不同的消息队列系统,主要区别如下: 开发语言和生态: RabbitMQ基于Erlang开发,采用AMQP协议,支持多种编程语言,比如Java…
-
hadoop win11安装hadoop环境 winutils.exe获取,windows安装大数据运行环境 winutils文件获取,winutils文件 hadoop(十四)
注:有些win环境的大数据dll文件,winutils.exe需要积分下载,我没有积分,提供一份github链接 每个版本基本都有,挺全。 1. github地址: GitHub …
-
RabbitMQ之动态创建队列与绑定交换机和监听器
为什么需要动态创建队列与绑定交换机?我在写项目的时候遇到这么个问题,我数据库中存在一个字段messageType指定为消息类型,消息类型存在三种,一种是通知类,一种是验证码类,一种…
-
前端小白也能懂!实时消息小红点学会使用 RabbitMQ 推送消息
一、前言 在Web应用程序中使用实时消息推送可以为用户提供更好的体验。例如,在聊天室或社交媒体上,用户会看到其他用户发送的消息的实时更新,这提高了用户参与感,并为用户提供了方便。实…
-
SPARK-RDD
1、什么是RDD 1.1、RDD五大核心属性 分区列表 RDD 数据结构中存在分区列表,用于执行任务时并行计算,是实现分布式计算的重要属性。分区计算函数 Spark 在计算时,是使…
-
Kafka入门笔记(一) –kafka概述+kafka集群搭建
文章目录 前言 一、Kafka概述 1、定义 2、消息队列 1) MQ传统应用场景 2) 消息队列的两种模式 3、kafka基础架构 二、Kafka安装部署 1、集群规划 2、ka…
