大数据
-
大数据信用报告应该去哪里查询比较好呢?
对于个人而言，大数据信用报告也变得越来越重要。那么，大数据信用报告应该去哪里查询呢?本文将为您详细介绍征信和大数据的区别，并推荐一个可靠的大数据平台。 首先，我们需要了解征…
-
Java的Spark与流式大数据处理
1.背景介绍 1. 背景介绍 随着数据的增长和复杂性，传统的批处理技术已经无法满足现代大数据处理的需求。流式计算技术成为了处理实时大数据的主流方式。Apache Spark是一个开…
-
Flink实时数仓同步：流水表实战详解
一、背景 在大数据领域，初始阶段业务数据通常被存储于关系型数据库，如MySQL。然而，为满足日常分析和报表等需求，大数据平台采用多种同步方式，以适应这些业务数据的不同存储需求。这些…
-
【Spark原理系列】自定义聚合函数 UserDefinedAggregateFunction 原理用法示例源码分析
Spark 自定义聚合函数（UDAF）UserDefinedAggregateFunction 原理用法示例源码分析 文章目录 Spark 自定义聚合函数（UDAF）UserDef…
-
大数据毕设分享 基于机器学习(深度学习)的文本分类系统
# 0 简介 今天学长向大家介绍适合作为毕设的项目： 毕设分享 多功能 Web 应用渗透测试系统（源码+论文） 项目获取： https://gitee.com/sinonfin/a…
-
Spark3 新特性之AQE
文章目录 Spark3 AQE 一、 背景 二、 Spark 为什么需要AQE? (Why) 三、 AQE 到底是什么？(What) 四、AQE怎么用？(How) 4.1 自动分区…
-
大数据 – Hadoop系列《四》- MapReduce（分布式计算引擎）的核心思想
上一篇： 大数据 – Hadoop系列《三》- MapReduce（分布式计算引擎）概述-CSDN博客 目录 13.1 MapReduce实例进程 13.2 阶段组成 …
-
大数据英文考试复习——第六章（大数据处理概念）
目录 前言 1.并行处理（parallel data processing）： 2.分布式数据处理（distributed data processing）： 3.Hadoop与M…
-
HBase的Region分裂与合并策略
1.背景介绍 1. 背景介绍 HBase是一个分布式、可扩展、高性能的列式存储系统，基于Google的Bigtable设计。HBase的Region是数据存储的基本单位，每个Reg…
-
MySQL与Apache Flink数据库集成
1.背景介绍 MySQL是一种流行的关系型数据库管理系统，广泛应用于Web应用程序、企业应用程序和数据仓库等领域。Apache Flink是一种流处理框架，用于实时处理大规模数据流…
-
大数据毕业设计：python微博舆情分析系统+可视化+情感分析+爬虫+机器学习（源码）✅
博主介绍：✌全网粉丝10W+,前互联网大厂软件研发、集结硕博英豪成立工作室。专注于计算机相关专业毕业设计项目实战6年之久，选择我们就是选择放心、选择安心毕业✌感兴趣的可以先收藏起来…
-
HCIA-Big Data V3.0结课测试题(HCIA-Big Data V3.0模拟考试)
判断题： 1、ElasticSearch是基于Lucene的全文检索服务,也可以作为NoSQL数据库使用。 正确答案：正确 2、KerberosServer主要是提供认证功能，Ke…
-
Spark内核解析-整体概述1（六）
1、Spark整体概述 1.1整体概念 Apache Spark是一个开源的通用集群计算系统，它提供了High-level编程API，支持Scala、Java和Python三种编程…
-
HBase性能优化与调参
1.背景介绍 HBase是一个分布式、可扩展、高性能的列式存储系统，基于Google的Bigtable设计。它是Hadoop生态系统的一部分，可以与HDFS、MapReduce、Z…
-
PySpark（一）Spark原理介绍、PySpark初体验及原理
目录 Spark简介 Spark VS Hadoop Spark四大优点 Spark框架模块 Spark的结构角色 Spark的运行模式 本地模式 Standalone模式 …
