大数据
-
大数据开发之Spark（完整版）
第 1 章：Spark概述 1.1 什么是spark 回顾：hadoop主要解决，海量数据的存储和海量数据的分析计算。 spark是一种基于内存的快速、通用、可扩展的大数据分析计算…
-
【EI会议征稿】2024年第四届人工智能、自动化与高性能计算国际会议（AIAHPC 2024）
2024年第四届人工智能、自动化与高性能计算国际会议（AIAHPC 2024） 2024 4th International Conference on Artificial In…
-
Elasticsearch数据操作原理
Elasticsearch 是一个开源的、基于 Lucene 的分布式搜索和分析引擎，设计用于云计算环境中，能够实现实时的、可扩展的搜索、分析和探索全文和结构化数据。它具有高度的可…
-
头歌大数据MapReduce基础运用
第1关：WordCount词频统计 本关任务 词频统计是最能体现MapReduce思想的程序，结构简单，上手容易。 词频统计的大致功能是：统计单个或者多个文本文件中每个单词出现的次…
-
大数据常用算法和分析模型
大数据算法 1.线性回归（Linear Regression）：线性回归是一种用于预测数值型变量的监督学习算法，它通过拟合一个线性函数来描述输入变量和输出变量之间的关系。 2.逻辑…
-
大数据和AI-竞赛平台
企业自办平台 天池大数据竞赛 天池大数据竞赛是由阿里巴巴主办，面向全球新生代力量的高端算法竞赛。通过开放海量数据和“天池”分布式计算平台，大赛让所有参与者有机会运用其设计的算法解决…
-
VMware执行命令hadoop-daemon.sh start journalnode报错hadoop-daemon.sh: 未找到命令…
首先启动hadoop1节点的Zookeeper服务 然后启动hadoop1节点的Journalnode执行命令hadoop-daemon.sh start journalnode报…
-
在虚拟机上从0开始安装 hadoop 3.1.3 集群记录
hadoop 3.1.3 安装记录 linux 安装 VMware 新建虚拟机向导 VMware的网络配置 centos 7.5 安装 设置服务器 使用windTerm 连接服务器…
-
大数据开源部署的操作手册
大数据开源部署的操作手册 一、准备阶段 需求分析：明确业务需求，确定所需的大数据组件及其功能。 环境评估：评估服务器硬件资源，包括CPU、内存、存储和网络带宽。 版本选择：根据需求…
-
python-大数据分析-基于大数据的QQ音乐数据分析系统设计与实现
设计说明 国内外数字音乐市场经过几百年的发展, 收录的音乐作品总数量已经达到了相当可观的程度, 面对数量如此庞大的音乐作品, 如何更加便捷、高效的让用户听到喜欢的音乐作品, 是音乐…
-
分析大数据电子商务的关键技术与设计
目录 第1 章 绪论 1.1研究背景 1.2研究意义 1.3研究内容 第2章大数据电子商务的关键技术 2.1数据挖掘技术 2.2 数据可视化技术 2.3数据仓库技术 第3章 …
-
Hudi Java Client总结|读取Hive写Hudi代码示例
前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住分享一下给大家。点击跳转到网站：https://www.captainai.net/dongkelun 前言 Hu…
-
第2.4章：StarRocks表设计–分区分桶与副本数
StarRocks采用Range-Hash的组合数据分布方式，也就是我们一直在提的分区分桶方式。 1分区 StarRocks中的分区是在建表时通过PARTITION BY RANG…
-
Spark 大数据实战：基于 RDD 的大数据处理分析
之前笔者参加了公司内部举办的一个 Big Data Workshop，接触了一些 Spark 的皮毛，后来在工作中陆陆续续又学习了一些 Spark 的实战知识。 本文笔者从小白的视…
-
ES如何搜索两个索引
在Elasticsearch（ES）中，索引是存储和查询数据的地方，而联合查询是查询多个索引的能力。当你在ES中查询时，可以指定要查询的索引。 如果你要查询两个不同的索引，你可以在…
