分类： hadoop
-
HDFS读写流程译
由 DistributedFileSystem 通过 RPC 向 NameNode 请求返回文件的 Block…
-
十年数据分析经验总结出这三类工具最好用
虽然这个问题有点俗套，但是很重要，我也一直努力在追求这个终极问题的答案。如果大家在网上去搜索这方面相关的信息，…
-
kafka源码解析2Metadata集群元信息
上一节讲到Cluster主要用来存放Node节点信息，TopicPartition分区信息和Partition…
-
kafka源码解析1KafkaProducer-Cluster集群信息
Cluster集群元信息由三种类型的对象组合Node, TopicPartition, PartitionIn…
-
hadoop241伪分布式搭建
1.0点击VMware快捷方式，右键打开文件所在位置 -> 双击vmnetcfg.exe -> V…
-
Hadoop安全模式Safe-mode
The number of live datanodes 0 has reached the minimum …
-
Giraph源码分析七-添加消息统计功能
1、 添加类，把每个超步发送的消息量大小写入Hadoop的Counter中。在org.apache.girap…
-
HIve的安装
笔者是在Centos7.3上安装的hadoop,使用的是hadoop-3.2的版本。直接按照hadoop-2.…
-
Giraph源码分析六Edge-分析
1.在Vertex类中，顶点的存储方式采用邻接表形式。每个顶点有 VertexId、VertexValue、O…
-
Giraph-源码分析五-加载数据同步总结
作者|白松 关于Giraph 共有九个章节，本文第五个章节。 环境：在单机上（机器名：giraphx）启动了2…