大数据

文章目录 引言 支持多版本 Flink 切换 功能展示 使用方法 数据标签 合并微服务 Bug修复，细节优化 结语 引言 小伙伴们，大家好，数睿通 2.0 数据中台迎来了 12 月…

1、Flink cdc是什么？         CDC 的全称是 Change Data Capture ，在广义的概念上，只要是能捕获数据变更的技术，我们都可以称之为 CDC 。…

文章目录 0 前言 1 课题背景 2 数据处理 3 数据可视化工具 3.1 django框架介绍 3.2 ECharts 4 Django使用echarts进行可视化展示（mysq…

在21世纪的今天，人工智能已经深入到我们生活的方方面面。作为一家专注于AI技术研发和应用的公司，优秘智能自2018年成立以来，始终站在科技前沿，致力于为企业和商家提供领先的AI技术…

Hadoop的基础操作 HDFS是Hadoop的分布式文件框架，它的实际目标是能够在普通的硬件上运行，并且能够处理大量的数据。 HDFS采用主从架构，其中由一个NameNode和多…

        之前使用Flink查询Redis数据的过程中，由于对数据一致性的要求并不是很高，当时是用MapFunction +  State 的方案。先缓存一大堆数据到Stat…

小知识: 大数据开发人员/数据分析人员,必须要对自己统计的指标结果负责!!! 结果数据的核对方式: 1- 在离线文件中直接ctrl+F搜索关键内容核对(不常用) 2- 一般原始数据…

Flink 风险欺诈检测 文章目录 Flink 风险欺诈检测 背景 准备条件 FraudDetectionJob.java FraudDetector.java 代码分析 执行环境…

目录 前言 毕设选题 网站和Web应用开发方向 小程序开发方向 人工智能和机器学习方向 数据科学和大数据分析方向 信息安全和网络安全方向 物联网和智能家居方向 选题迷茫 选题的重要…

1. Spark基本介绍 1.1 定义 Spark是可以处理大规模数据的统一分布式计算引擎。 1.2 Spark与MapReduce的对比 在之前我们学习过MapReduce，同样…

系统环境为 CentOS 7.5 版本。 安装 Java 8。 安装 Hadoop 集群，Hadoop 建议选择 Hadoop 2.7.5 以上版本。 配置集群节点服务器间时间同步…