分布式
-
大数据实验 实验六:Spark初级编程实践
Spark初级编程实践 实验环境:Windows 10 Oracle VM VirtualBox 虚拟机:cnetos 7 Hadoop 3.3 实验内容与完成情况: 1. 安装h…
-
大数据处理与分析-Spark
导论 (基于Hadoop的MapReduce的优缺点) MapReduce是一个分布式运算程序的编程框架,是用户开发“基于Hadoop的数据分析应用”的核心框架 MapReduce…
-
kafka实现消息接受和发送
1、首先引入依赖 org.springframework.kafka spring-kafka org.springframework.kafka spring-kafka-tes…
-
【Kafka-Eagle】EFAK告警配置与实践
Kafka-Eagle是一个开源的Kafka集群监控与告警系统,可以帮助用户实现对Kafka集群的实时监控、性能指标收集以及异常告警等功能。下面是关于Kafka-Eagle的告警配…
-
1.1完全分布式Hadoop署集群
完全分布式Hadoop署集群 大家好,我是行不更名,坐不改姓的宋晓刚,下面将带领大家从基础到小白Hadoop学习,跟上我的步伐进入Hadoop的世界。 微信:15319589104…
-
RabbitMQ问题总结
:::info 使用场景 异步发送(验证码、短信、邮件。。。) MySQL 和 Redis、ES 之间的数据同步 分布式事务 削峰填谷 … :::如何保证消息不丢失 上图是消息正常…
-
Hadoop 完全分布式搭建(超详细)
Hadoop 完全分布式搭建 1.虚拟机安装 系统安装 网络设置 2.环境、免密设置 前置环境设置 免密登录设置 集群安装规划 3.安装 Hadoop 完全分布式 1.上传安装包 …
-
Kafka是什么,以及如何使用SpringBoot对接Kafka
系列文章目录 上手第一关,手把手教你安装kafka与可视化工具kafka-eagle 架构必备能力——kafka的选型对比及应用场景 Kafka存取原理与实现分析,打破面试难关 防…
-
深入了解 RabbitMQ:高性能消息中间件
目录 引言: 一、RabbitMQ 介绍 二、核心概念 三、工作原理 四、应用场景 五、案例实战 引言: 在现代分布式系统中,消息队列成为了实现系统间异步通信、削峰填谷以及解耦组件…
-
如何完全卸载RabbitMQ?
想必大家在安装与卸载软件的时候,都踩过不少的坑?那么如何把RabbitMQ卸载干净呢? 1.打开控制面板,找到RabbitMQ server,右键单击RabbitMQ Server…
-
分布式是大数据处理的万能药?
前言:分布式是大数据处理的万能药?今天叶秋学长跟大家一起探讨这个问题~ 使用分布式集群来处理大数据是当前的主流,将一个大任务拆分成多个子任务分布到多个节点进行处理通常能获得显著的性…
-
RabbitMQ死信队列
目录 一、概念 二、出现死信的原因 三、实战 (一)代码架构图 (二)消息被拒 (三)消息TTL过期 (四)队列达到最大长度 一、概念 先从概念解释上搞清楚这个定义,死信,顾名思义…
-
分布式因果推断在美团履约平台的探索与实践
美团履约平台技术部在因果推断领域持续的探索和实践中,自研了一系列分布式的工具。本文重点介绍了分布式因果树算法的实现,并系统地阐述如何设计实现一种分布式因果树算法,以及因果效应评估方…
-
Apache SeaTunnel:新一代高性能、分布式、海量数据集成工具从入门到实践
关于Apache SeaTunnel Apache SeaTunnel 原名 Waterdrop,在 2021 年 10 月更名为 SeaTunnel 并申请加入 Apache孵化…
-
【大数据】安装 Zookeeper 单机版
安装 Zookeeper 单机版 下面安装 Zookeeper,由于它是 Apache 的一个顶级项目,所以域名是 zookeeper.apache.org,所有 Apache 的…
