kafka
-
Kafka连接超时问题及解决方法
Kafka是一个高性能、分布式的消息队列系统，被广泛应用于大规模数据处理和实时流处理场景。然而，在使用Kafka进行远程连接时，有时会遇到连接超时的问题。本文将介绍Kafka连接超…
-
kafka 3.5.0集群环境部署（使用自带的zookeeper）
环境和安装包准备： 管理界面包：kafka-manager-1.3.3.7.zip (链接) kafka二进制包：kafka_2.13-3.5.0.tgz (链接) java包：j…
-
微服务集成Windows版kafka
微服务集成Windows版kafka 文章目录 微服务集成Windows版kafka 1-兼容 2-雷点 3-安装 4-配置 5-启动 6-实现 1-兼容 Kafka 和 Spri…
-
Kafka原理之消费者
一、消费模式 1、pull(拉)模式(kafka采用这种方式) consumer采用从broker中主动拉取数据。 存在问题：如果kafka中没有数据，消费者可能会陷入循环中，一直…
-
轻松通关Flink第24讲：Flink 消费 Kafka 数据业务开发
在上一课时中我们提过在实时计算的场景下，绝大多数的数据源都是消息系统，而 Kafka 从众多的消息中间件中脱颖而出，主要是因为高吞吐、低延迟的特点；同时也讲了 Flink 作为生产…
-
关于kafka消费者超时配置
在Kafka中，消费者超时配置是指消费者在等待服务器响应时的超时时间。如果消费者在超时时间内未收到服务器的响应，它将重新发起请求或执行其他逻辑。 以下是关于Kafka消费者超时配置…
-
kafka可视化web管理工具-KafkaMmap
kafka可视化web管理工具-KafkaMmap 使用过kafka的小伙伴应该都知道kafka本身是没有管理界面的，所有操作都需要手动执行命令来完成。但有些命令又多又长，如果…
-
记一次Flink通过Kafka写入MySQL的过程
一、前言 总体思路：source –>transform –>sink ,即从source获取相应的数据来源，然后进行数据转换，将数据从比较乱的格式，转换成…
-
Kafka的下载安装以及使用
一、Kafka下载 下载地址：https://kafka.apache.org/downloads 二、Kafka安装 因为选择下载的是 .zip 文件，直接跳过安装，一步到位。 …
-
springboot 连接 kafka集群（kafka版本 2.13-3.4.0）
前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住分享一下给大家。点击跳转到网站。 springboot 连接 kafka集群 一、环境搭建 1.1 springb…
-
大数据系统常用组件理解（Hadoop/hive/kafka/Flink/Spark/Hbase/ES）
一.Hadoop Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 Hadoop 以一种可靠、高效、可伸缩的方式进行数据处理。 Hadoop的核心是yarn、HD…
-
《Kafka系列》Kafka常见问题处理记录
文章目录 Kafka常见问题处理记录 一、kafka创建topic失败， Replication factor: 1 larger than available brokers: …
-
【踩坑专栏】禁止kafka自带的日志
在测试kafka的时候，有很多kafka自带的debug和info日志，需要禁止掉。 方法[1]如下： 在resource文件夹下，新增一个logback.xml文件。 内容如下：…
-
[AIGC 大数据基础] 大数据流处理 Kafka
在当今信息时代，我们生活在一个数据爆炸的世界中。大数据处理已成为各行各业中不可或缺的一部分。在大数据处理的过程中，流处理变得越来越重要，因为我们需要实时地处理和分析数据，以便做出及…
-
storm连接kafka，storm整合mybatis并连接mysql
课题题目： 1. 课题背景 某股票交易机构已上线一个在线交易平台，平台注册用户量近千万，每日均 接受来自全国各地的分支机构用户提交的交易请求。鉴于公司发展及平台管理要 求，拟委托开…
