分布式
-
Spark相关知识点(期末复习集锦)
嗨喽,最近小伙伴们快要期末考试了吧,下面是我对《Spark零基础实战》的总结,希望能帮助到你们。 一、Spark简介 Spark,拥有hadoop MR所具有的优点,但不同于MR的…
-
Kafka ui 搭建以及使用
Kafka ui 序 kafka 本身没有自带相关的 ui 界面,但是很多时候没有页面意味着只有使用命令行进行相关操作如创建 topic、更改 topic 信息、重置 offset…
-
基于spark的音乐数据分析系统的设计与实现
收藏关注不迷路 文章目录 前言 一、项目介绍 二、开发环境 三、功能介绍 四、核心代码 五、效果图 六、文章目录 前言 本文主要对音乐数据,进行分析,系统技术主要使用,1.对原始数…
-
win10 安装RabbitMQ时 执行:rabbitmq-plugins enable rabbitmq
一、安装rabbitmq之前一定先安装好Eralng并配置好环境变更(这个自行去官方下载适合自己电脑的版本) 二、安装前最好把360、腾讯等电脑管家软件暂时退出 三、下载Rabbi…
-
分布式RPC框架Dubbo详解
目录 1.架构演进 1.1 单体架构 1.2 垂直架构 1.3 分布式架构 1.4 SOA架构 1.5 微服务架构 2.RPC框架 2.1 RPC基本概念介绍 2.1.1 R…
-
hadoop 三种运行方式
一、本地运行方式 1 创建在hadoop-3.3.5文件下面创建一个wcinput文件夹 [antares@hadoop1 hadoop-3.3.5]$ mkdir wcinput…
-
Kafka 基本概念和术语
1、消息 Record:Kafka 是消息引擎嘛,这里的消息就是指 Kafka 处理的主要对象。 2、主题 Topic:主题是承载消息的逻辑容器,在实际使用中多用来区分具体的业务。…
-
RabbitMQ延迟队列
目录 一、概念 二、使用场景 三、RabbitMQ 中的 TTL (一)队列设置 TTL (二)消息设置 TTL (三)两者的区别 四、整合SpringBoot实现延迟队列 (一)…
-
猿创征文|国产数据库,我看好分布式数据库 TiDB
前言 每当提及我们国家必须要自主掌握和创新的一些关键核心技术,相信大多数人都会优先考虑到芯片,但其实还有一种非常核心的 IT 技术也至关重要,那就是 数据库。 面对中国这样的人口大…
-
使用 Kafka Tools(现已更名为 Offeset Exploer)无法连接虚拟机的 Kafka 集群,报错error connecting to the cluster
发生缘由 学习 Kafka 的使用,结果发现使用 Kafka Tools(现已更名为 Offeset Exploer)无法连接虚拟机的 Kafka 集群,报错信息:error co…
-
【问题解决】Kafka报错 Bootstrap broker x.x.x.x:9092 (id: -1 rack: null) disconnected
问题复现 近日针对某一客户需求开发了一个需要使用Kafka的功能,功能是什么暂且不论,在本地虚机的Kafka连接一切正常遂放到测试服务器上验证功能,以下是监听topic成功和警告报…
-
SparkSQL
第1章 SparkSQL 概述 1.1 SparkSQL 是什么 Spark SQL 是 Spark 用于结构化数据(structured data)处理的 Spark 模块。 1…
-
林子雨大数据技术原理与运用期末复习
一、填空题 1.大数据的数据结构类型包括结构化数据、半结构化数据和___非结构化数据____。 2.大数据的4V10是(只填英文)__数据量大__Volume____、_数据类型多…
-
大数据分析Spark部署安装
1.安装包下载 目前Spark最新稳定版本:课程中使用目前Spark最新稳定版本:3.1.x系列 https://spark.apache.org/docs/3.1.2/…
-
【大数据】分布式协调系统 Zookeeper
分布式协调系统 Zookeeper 1.Zookeeper 的特点2.Zookeeper 的数据结构3.Zookeeper 的应用场景3.1 统一命名服务3.2 统一配置管理3.3…
