分类： 大数据
-
关于大数据:基于星环科技大数据平台-辽宁城市建设职业技术学院打造智慧校园
当今世界，倒退职业教育曾经成为各国应答危机、促成待业、迎接新工业革命挑战的共同行动。同时数字化技术的疾速倒退，…
-
关于大数据:描述一下Spark的DAG原理
DAG(Directed Acyclic Graph）有向无环图，Spark中应用DAG对RDD的关系进行建模…
-
关于大数据:尚硅谷数仓实战之1项目需求及架构设计
@TOC数仓笔记数据仓库和数据集市详解：ODS、DW、DWD、DWM、DWS、ADS尚硅谷数仓实战之1我的项目…
-
关于大数据:Flink-是如何统一批流引擎的
Flink 中每个 Task 的输入会以 IntermediateResult 做封装，外部并没有对流和批两种…
-
关于大数据:数据仓库和数据集市ODSDWDWDDWMDWSADS
Data warehouse（可简写为DW或者DWH）数据仓库，是在数据库曾经大量存在的状况下，它是一整套包含…
-
关于大数据:kafka元数据信息存储在哪里如何查看
kafka数据的存储形式；kafka如何通过offset查找message。1.前言写介绍kafka的几个重要…
-
关于大数据:大数据开发之Hive
Hive简介定义Facebook为了解决海量日志数据的剖析而开发了hive，起初开源给了Apache基金会组织…
-
关于大数据:大数据开发之如何用Scala进行spark开发
1、开发第一个Spark程序1)创立一个Spark Context2)加载数据3)把每一行宰割成单词4)转换成…
-
关于大数据:关于数据清洗的步骤及方法的理解
数据荡涤， 是整个数据分析过程中不可短少的一个环节，其后果品质间接关系到模型成果和最终论断。在实际操作中，数据…
-
关于大数据:干货大数据开发之Spark总结
一、实质Spark是一个分布式的计算框架，是下一代的MapReduce，扩大了MR的数据处理流程二、mapre…