大数据
-
轻松获取图片和视频文件的Exif信息-Java篇
前言 随着现在实景地图的如火如荼建设,无人机等航拍测绘手段的不断升级,我们在获取全景照片或者正射影像,全景视频等数据上更加快速、便捷。由于无人机本身不进行相关数据的处…
-
【2023】Prometheus-相关知识点(面试点)
目录 1.Prometheus 1.1.什么是Prometheus 1.2.Prometheus的工作流程 1.3.Prometheus的组件有哪些 1.4.Prometheus有…
-
软工大数据实验(手把手教你入门Hadoop、hbase、spark)
写在最前面,如果你只是来找答案的,那么很遗憾,本文尽量避免给出最后结果,本文适合Linux0基础学生,给出详细的环境配置过程,实验本身其实很简单,供大家一起学习交流。 实验1 1.…
-
Hive基础和使用详解
文章目录 一、启动hive 1. hive启动的前置条件 2. 启动方式一: hive命令 3. 方式二:使用jdbc连接hive 二、Hive常用交互命令 1. hive -he…
-
人工智能入门实战:如何在人工智能中实施可解释性
1.背景介绍 人工智能(Artificial Intelligence, AI)是一门研究如何让计算机模拟人类智能的科学。在过去的几十年里,人工智能技术已经取得了显著的进展,例如机…
-
【SQL应知应会】索引(三)• MySQL版:聚簇索引与非聚簇索引;查看索引与删除索引;索引方法
欢迎来到爱书不爱输的程序猿的博客, 本博客致力于知识分享,与更多的人进行学习交流 本文收录于SQL应知应会专栏,本专栏主要用于记录对于数据库的一些学习,有基础也有进阶,有MySQL…
-
2024基于AI与大数据的智能客服展望
随着新的一年的到来,客服行业正在经历一场革命。技术的飞速发展,特别是人工智能(AI)、大数据和大语言模型,正在彻底改变客服行业的面貌。本文将深入分析2024年客服行业的一些关键趋势…
-
大数据Doris(十八):演示单分区和复合分区
文章目录 演示单分区和复合分区 一、单分区
-
大数据技术之Hive基础知识及基础操作(一)
一、数据仓库 数据仓库是一个面向主题的、集成的、相对稳定的、反应历史变化的数。据集合,用于支持管理决策。 二、数据仓库的体系结构 三、Hive简介 •Hive是一个构建于Hadoo…
-
数据清洗【大数据比赛长期更新】
数据清洗 1.题目分析 使用Scala编写spark工程代码,将ods库中相应表数据全量抽取到Hive的dwd库中对应表中。表中有涉及到timestamp类型的,均要求按照yyyy…
-
Python大数据之PySpark(三)使用Python语言开发Spark程序代码
文章目录 使用Python语言开发Spark程序代码 总结 后记 使用Python语言开发Spark程序代码 Spark Standalone的PySpark的搭建—-…
-
2.2 如何使用FlinkSQL读取&写入到文件系统(HDFS\Local\Hive)
目录 1、文件系统 SQL 连接器 2、如何指定文件系统类型 3、如何指定文件格式 4、读取文件系统 4.1 开启 目录监控 4.2 可用的 Metadata 5、写出文件系统 …
-
Flink快速部署集群,体验炸了!
📢📢📢📣📣📣 哈喽!大家好,我是【IT邦德】,江湖人称jeames007,10余年D…
-
大数据系统常用组件理解(Hadoop/hive/kafka/Flink/Spark/Hbase/ES)
一.Hadoop Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 Hadoop 以一种可靠、高效、可伸缩的方式进行数据处理。 Hadoop的核心是yarn、HD…
-
大数据开发—阿里云ECS上搭建Hadoop伪分布式环境(下篇)
各位大佬、热爱大数据开发的朋友们:大家好!在上篇我已详细介绍了如何在阿里云ECS实例上搭建Hadoop伪分布式环境的前几步:JDK的安装、JDK环境变量的配置、Had…
