分布式
-
Zookeeper与分布式坐标服务
1.背景介绍 Zookeeper是一个开源的分布式协调服务，用于构建分布式应用程序和系统。它提供了一种可靠的、高效的、分布式的协同服务，以解决分布式系统中的一些常见问题，如集中化配…
-
kafka详细解释
什么是kafka Kafka是一个开源的分布式流处理平台，最早由LinkedIn开发，并于2011年成为Apache软件基金会的顶级项目。Kafka使用高效、可扩展和持久化…
-
数据仓库与大数据技术的结合
1.背景介绍 大数据技术已经成为当今企业和组织中不可或缺的一部分，它为企业提供了大量的数据来源，帮助企业更好地了解市场、客户、产品等，从而提高企业的竞争力。然而，大数据技术的发展也…
-
CVE-2023-34040 Kafka 反序列化RCE
漏洞描述 Spring Kafka 是 Spring Framework 生态系统中的一个模块，用于简化在 Spring 应用程序中集成 Apache Kafka 的过程，记录 (…
-
Zookeeper的安全性与权限管理
1.背景介绍 1. 背景介绍 Apache Zookeeper是一个开源的分布式协调服务，用于构建分布式应用程序的基础设施。它提供了一种可靠的、高性能的、分布式的协同服务，以实现分…
-
RabbitMQ的基本类型
1.背景介绍 RabbitMQ是一种开源的消息代理服务，它使用AMQP(Advanced Message Queuing Protocol，高级消息队列协议)协议来传输消息。它可以…
-
Zookeeper的应用场景
一、Zookeeper的应用场景包括： 配置中心：Zookeeper可以用来存储和管理配置信息，例如集群中的机器配置、服务地址配置等。通过Zookeeper，可以将配置信息统一管理…
-
RabbitMQ介绍及简单操作
文章目录 一、同步调用 二、异步调用 三、MQ介绍 1.安装RabbitMQ 2.介绍RabbitMQ 3.页面简单使用 一、同步调用 例如： 通过openfeign进行服务之间通…
-
使用python的pika链接rabbitMq断裂
比如我们执行一个很长的任务的时候，执行结束ack确认发现确认失败，mq都断了。 只要是使用pyhon的pika都会出现这个问题，因为pika本身是没有主动发送心跳机制的（你用jav…
-
Zookeeper与ApacheCassandra
1.背景介绍 1. 背景介绍 Zookeeper 和 Apache Cassandra 都是分布式系统中常见的开源技术，它们在分布式系统中扮演着重要的角色。Zookeeper 是一…
-
Spark编程实验四：Spark Streaming编程
目录 一、目的与要求 二、实验内容 三、实验步骤 1、利用Spark Streaming对三种类型的基本数据源的数据进行处理 2、利用Spark Streaming对Kafka高级…
-
Spark调优解析-GC调优3（七）
1 GC调优 Spark立足内存计算，常常需要在内存中存放大量数据，因此也更依赖JVM的垃圾回收机制。与此同时，它也兼容批处理和流式处理，对于程序吞吐量和延迟都有较高要求，因此GC…
-
Spark与TensorFlow的比较与对比
1.背景介绍 1. 背景介绍 Apache Spark和TensorFlow是两个非常流行的开源框架，它们在大数据处理和机器学习领域都有着重要的地位。Spark是一个通用的大数据处…
-
【Redis】实现购物秒杀及分布式锁
Redis实现购物秒杀及分布式锁 全局唯一ID Redis自增ID策略 ID构造是：时间戳 + 计数器 每天一个key，方便统计订单量 业务实现 获取指定时间的秒数 LocalDa…
-
1、分布式调用之 quartz 基本原理
这里写目录标题 任务调度需求分析 基本需求 任务调度工具对比 Timer Quartz 基本介绍 体系结构总结 JobDetail Trigger SimpleTrigger Ca…
