分类: hadoop
-
关于hadoop:躬行系列自动故障转移hadoop
接手动配置的上文减少HA配置hdfs-site.xml {代码…} core-site.xml {代码..…
-
关于hadoop:躬行系列手动控制active的hadoop集群
配置文件core-site.xml {代码…} hdfs-site.xml {代码…} 启动journ…
-
关于hadoop:深入浅出-Yarn-架构与实现23-Yarn-基础库-服务库与事件库
一个宏大的分布式系统,各个组件间是如何协调工作的?组件是如何解耦的?线程运行如何更高效,缩小阻塞带来的低效问题…
-
关于hadoop:深入浅出-Yarn-架构与实现22-Yarn-基础库-底层通信库-RPC
RPC(Remote Procedure Call) 是 Hadoop 服务通信的要害库,撑持下层分布式环境下…
-
关于hadoop:Hadoop设置任务执行优先级
当多个工作提交到一个队列上时,如果想让后提交的工作优先执行,就须要有工作优先级机制来帮忙。上面介绍如何开启工作…
-
关于hadoop:深入浅出-Yarn-架构与实现21-Yarn-基础库概述
理解 Yarn 根底库是前面浏览 Yarn 源码的根底,本节对 Yarn 根底库做总体的介绍。并对其中应用的第…
-
关于hadoop:深入浅出-Yarn-架构与实现12-搭建-Hadoop-源码阅读环境
在 idea 中点击 File – Open 抉择对应的文件夹目录,进行导入。之后会进入漫长的程序加载过程(看…
-
关于hadoop:深入浅出-Yarn-架构与实现11-设计理念与基本架构
资源利用率低:基于 slot 的资源分配模型。机器会将资源划分成若干雷同大小的 slot,并划定哪些是 map…
-
关于hadoop:6Flink-CEP-SQL模拟账号短时间内异地登录风控预警
本篇文章咱们来模仿一个实在的危险辨认场景,模仿XX平台上可能呈现盗号行为。技术实现计划:(1)通过将xxx平台…
-
关于hadoop:躬行系列hadoop集群部署
上传解压等疏忽两个外围配置文件:core-site.xml hdfs-site.xml地位:/usr/hado…