分布式
-
kafka简单介绍和代码示例
“这是一篇理论文章，给大家讲一讲kafka” 简介 在大数据领域开发者常常会听到MQ这个术语，该术语便是消息队列的意思， Kafka是分布式的发布—订阅消息系统。它最初由Linke…
-
RabbitMq – windows 系统上安装
第一篇：RabbitMq -windows 安装 一、前言 二、下载 1、下载 RabbitMq.exe 2、下载 Erlang/OTP 三、安装 1、先安装 Erlang/OTP…
-
Spark代码案例
一、SparkSQL案例（电影数据统计） 数据源：http://files.grouplens.org/datasets/movielens/ml-100k/u.data 复制网页…
-
zookeeper 启动失败，报错 “ZooKeeper JMX enabled by default”
zookeeper启动时，出现如下情况： ====== zookeeper node1 启动 ========== [root@node1 conf]# zkServer.sh s…
-
【RabbitMQ】交换机的概念及使用
一、引言 1、什么是交换机 RabbitMQ中，交换机是一个核心概念，主要用来将生产者生产出来的消息，传送到对应的队列中。实际上，生产者生产的消息从不会直接发送到队…
-
Spark与ApacheAtlas集成
1.背景介绍 在大数据处理领域，Apache Spark和Apache Atlas是两个非常重要的开源项目。Spark是一个快速、高效的大数据处理框架，可以用于批处理、流处理和机器…
-
08、Kafka —— 消息存储相关的配置–＞消息过期时间设置、查看主题下的消息存活时间等配置
目录 消息存储相关的配置 ★ 消息的存储介绍 ★ 消息过期时间及处理方式 演示：log.cleanup.policy 属性配置 ★ 修改指定主题的消息保存时间 演示：将 test2…
-
HBase的数据库容量规划与优化
1.背景介绍 HBase的数据库容量规划与优化 1. 背景介绍 HBase是一个分布式、可扩展、高性能的列式存储系统，基于Google的Bigtable设计。它是Hadoop生态系…
-
详解kafka中的消息日志文件：Topic消息分类、partition分区、segment分段、offset偏移量索引文件
一、Kafka简介 Kafka是一种高吞吐量的基于zookeeper协调的以集群的方式运行的分布式发布订阅消息系统，支持分区（partition）、多副本（replica），具有非…
-
Zookeeper+kafka的应用及部署
Zookeeper+kafka的应用及部署 一、Zookeeper的概念 1、Zookeeper 定义 2、Zookeeper 工作机制 3、Zookeeper 特点 4、Zook…
-
微服务 初始 分布式搜索引擎 Elastic Search
文章目录 ⛄引言 一、什么是Elastic Search？ 二、Elastic Search 倒排索引 ⛅正向索引 ⚡倒排索引 ⛄正向和倒排 三、ES的一些概念 ⛅文档和字段 ⚡索…
-
『SEQ日志』在 .NET中快速集成轻量级的分布式日志平台
📣读完这篇文章里你能收获到 如何在Docker中部署 SEQ：介绍了如何创建和运行 SEQ 容器，给出了详细的执行操作 如何使用 NLog 接入 .NET Core…
-
CentOS7 下 Zookeeper 安装及配置
文章目录 一、Zookeeper 是什么 二、准备工作：主机准备 三、准备工作：JDK 安装 四、下载 Zookeeper 五、安装 Zookeeper 六、配置 Zookeepe…
-
RabbitMQ消息的链路跟踪
背景 TraceId能标记一次请求的调用链路，在我们排查问题的时候十分重要。系统引入MQ后，MQ消息默认不带TraceId，所以消息发送和处理的链路就断了。下面分享如何对业务逻辑无…
-
kafka本地安装报错
Error: VM option ‘UseG1GC’ is experimental and must be enabled via -XX:+UnlockExperimental…
