大数据
-
Flink 1.17教程:并行度设置&优先级
并行度设置&优先级 并行度(Parallelism) 并行度的设置 在Flink中,可以用不同的方法来设置并行度,它们的有效范围和优先级别也是不同的。 代码中设置 我们在代…
-
大数据信用报告多久查一次比较好?怎么查?
随着大数据技术的快速发展,大数据信用报告在个人信用评估中发挥着越来越重要的作用。然而,对于很多人来说,大数据信用报告仍然是一个相对陌生的概念。本文将就大数据信用报告的查询频率和查询…
-
安装kibana 报错/访问不了
安装kibana 报错 1,elasticsearch.yaml 和kibana.yaml 配置问题 2,elasticsearch 和kibana版本不一致 3,索引问题 1,e…
-
Flink作业部署与监控
1.背景介绍 Flink是一种流处理框架,它可以处理大规模数据流,实现实时数据处理和分析。Flink作业是Flink框架中的基本单位,它包含了一系列的数据处理任务和操作。在实际应用…
-
Flink中StateBackend(工作状态)与Checkpoint(状态快照)的关系
State Backends 由 Flink 管理的 keyed state 是一种分片的键/值存储,每个 keyed state 的工作副本都保存在负责该键的 taskmanag…
-
Java大数据处理与Hadoop
1.背景介绍 大数据处理是指处理和分析大量、高速、不断增长的数据,这些数据通常来自不同的来源,如网络、传感器、数据库等。随着互联网和人工智能的发展,大数据处理已经成为现代科学和工程…
-
Flink与Kafka集成
1.背景介绍 Flink与Kafka集成是一种常见的大数据处理技术,它可以帮助我们实现实时数据处理和分析。Flink是一个流处理框架,可以处理大量数据并提供实时分析功能。Kafka…
-
HBase介绍
一、HBase简介 1.1、HBase是什么 Google在200-2006发表了GFS、MapReduce、BigTable三篇 论文 ,号称“三驾马车”,开启了大数据的时代。 …
-
基于hutool的MD5加密以及hutool的一些常用工具
直接上干货! 第一步:添加依赖 maven 在项目的pom.xml的dependencies中加入以下内容: cn.hutool hutool-all 5….
-
大数据之使用Flume监听本地文件采集数据流到HDFS
本文介绍Flume监听本地文件采集数据流到HDFS 我还写了一篇文章是Flume监听端口采集数据流到Kafka【点击即可跳转,写的也非常详细】 任务一: 在Master节点使用Fl…
-
大数据技术原理及应用课实验3 :熟悉常用的HBase操作
目录 实验3 熟悉常用的HBase操作 一、实验目的 二、实验平台 三、实验步骤(每个步骤下均需有运行截图) (一)编程实现以下指定功能,并用Hadoop提供的HBase She…
-
【大数据】Flink SQL 语法篇(三):窗口聚合(TUMBLE、HOP、SESSION、CUMULATE)
《Flink SQL 语法篇》系列,共包含以下 10 篇文章: Flink SQL 语法篇(一):CREATE Flink SQL 语法篇(二):WITH、SELECT &…
-
大数据搭建
系列文章目录 ZOOKEEPER和KAFKA的配置 文章目录 系列文章目录 ZOOKEEPER和KAFKA的配置 一、ZOOKEEPER是什么? 二、KAFKA是什么? 三、基本配…
-
大数据与人工智能:推动能源资源管理的智能化与创新
1.背景介绍 能源资源管理是现代社会的基石,其智能化与创新对于提高能源利用效率、减少能源浪费、降低能源消耗成本以及提高能源安全性至关重要。随着人工智能(AI)和大数据技术的发展,它…
-
elasticsearch 7.12.1报错处理:ElasticsearchStatusException[Elasticsearch exception [type=parse
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档 文章目录 前言 一、我的测试代码: 二、问题所在 最后分享一下我自己的范围测试查询代码 前言 最近在使用RestH…
