大数据
-
【大数据-Hadoop】从入门到源码编译-概念篇
【大数据-Hadoop】从入门到源码编译-概念篇 Hadoop与大数据生态 （一）Hadoop是什么？ （二）Hadoop组成 1. HDFS 1.1 NameNode（nn） 1…
-
[AIGC 大数据基础] 大数据流处理 Kafka
在当今信息时代，我们生活在一个数据爆炸的世界中。大数据处理已成为各行各业中不可或缺的一部分。在大数据处理的过程中，流处理变得越来越重要，因为我们需要实时地处理和分析数据，以便做出及…
-
Hadoop基本概论
目录 一、大数据概论 1.大数据的概念 2.大数据的特点 3.大数据应用场景 二、Hadoop概述 1.Hadoop定义 2.Hadoop发展历史 3.Hadoop发行版本 4.H…
-
HBase命令总结，这一篇就够了
目录 HBase命令总结 前言 HBase Shell 基本命令 表操作命令 创建表 禁用表 启用表 查看表结构 删除表 数据操作命令 插入数据 获取数据 删除数据 扫描表 HBa…
-
【大数据实训】基于赶集网租房信息的数据分析与可视化(七)
温馨提示：文末有 CSDN 平台官方提供的博主 的联系方式，有偿帮忙部署 基于赶集网租房信息的数据分析与可视化 一、实验环境 （1）Linux： Ubuntu 16.04 （2）P…
-
storm连接kafka，storm整合mybatis并连接mysql
课题题目： 1. 课题背景 某股票交易机构已上线一个在线交易平台，平台注册用户量近千万，每日均 接受来自全国各地的分支机构用户提交的交易请求。鉴于公司发展及平台管理要 求，拟委托开…
-
物联网与大数据：创新应用与技术突破
1.背景介绍 物联网(Internet of Things, IoT)和大数据是当今最热门的技术趋势之一。物联网是指通过互联网将物体和日常生活中的各种设备连接起来，实现互联互通和信…
-
再也不用手写爬虫了！推荐5款自动爬取数据的神器！
大家好！今天给大家推荐一些不错的神器！ 网络信息的时代，想要收集信息，爬虫是一项必不可少的工具。对于很多小伙伴们来说，只是想利用爬虫进行快速的内容抓取，而并不想太过深入的学习爬虫。…
-
大数据AI人工智能的未来趋势：如何预见行业发展
1.背景介绍 大数据、人工智能和人工智能(AI)是当今世界最热门的话题之一。随着数据量的增加，数据的处理和分析变得越来越复杂。大数据技术为我们提供了一种新的方法来处理这些复杂的数据…
-
核心圈好图书推荐（一）
写在前面 凉哥核心圈程序员必备十大图书推荐（一），各位伙伴应该一目了然了哈，没错凉哥准备出一系列图书推荐的文章，其实很多朋友在私下问凉哥除了大学的课程外自己要不要读一些技术类的书籍…
-
大数据篇 | Hadoop、HDFS、HIVE、HBase、Spark之间的联系与区别
文章目录 1、Hadoop 2、HDFS 3、HIVE 4、HBase 5、Spark 1、Hadoop Hadoop是一个开源的分布式计算框架，用于存储和处理大规模数据集。它提供…
-
Flink on K8S集群搭建及StreamPark平台安装
1.环境准备 1.1 介绍 在使用 Flink&Spark 时发现从编程模型, 启动配置到运维管理都有很多可以抽象共用的地方, 目前streampark提供了一个flink…
-
从0到1搭建数据仓库流程
从0到1搭建数仓，可以概括为6个步骤：业务探查、技术选型、规范制定、主题域划分、数仓分层、模型建设。 一、业务探查 梳理公司业务系统，业务关心的指标，开发过的需求。一般业务关心的数…
-
【计算机毕业设计】外卖点餐系统
一、系统截图（需要演示视频可以私聊） 摘 要 民以食为天，外卖点餐系统餐饮业一直是与人们日常生活息息相关的产业。传统的电话外卖点餐或者到店消费已经不能适应市…
-
【大数据】通过 docker-compose 快速部署 ClickHouse 保姆级教程
文章目录 一、概述 二、ClickHouse 列数据存储优缺点 1）优点 2）缺点 三、ClickHouse 中 Zookeeper 的作用 四、前期准备 1）部署 docker …
