发简信
IP属地：北京
-
一文读懂HashMap本文准备从以下几个方面去讲解HashMap：1）HashMap源码详细分析2）HashMap为什么是线程不安全的？3）HashMap和HashT...
-
MPP架构相关知识学习
学习一下MPP架构的特点，优势，常见的一些MPP架构的系统（CK、Doris、SR、Trino等）各方面对比。 一、MPP架构概述 1.1 什么...
-
【HDFS】EC重构过程中的校验功能：DecodingValidator
一、动机 DecodingValidator是在HDFS-15759中引入的一个用于校验EC数据重构正确性的组件。 先说下引入DecodingV...
-
【HDFS】EC文件副本缺失后，会自动补充么？
EC存储能够有效较低存储成本，但是我们也需要关注数据可用性相关的事情，避免发生数据丢失的情况。 本文来探讨一下EC补充低冗余度的块的相关知识。 ...
-
【HDFS】BlockPlacementPolicyRackFaultTolerant#getMaxNode方法的功能及具体实例
方法参数说明： numOfChosen：已经选择的节点数 numOfReplicas：还需要选择的副本数 方法的返回值是一个长度为2的数组：[调...
-
【Ratis】关于对Raft论文里safety的保证及代码实现
Raft论文里算法部分核心内容就三个方面：1、Leader Election 领导者选举2、Log Replication 日志复制3、Safe...
-
【HDFS-Client系列】FSOutputSummer#write1方法的细节
有些代码初次阅读并不能看出其中的处理细节，但是当过一段时间对这个部分熟悉了之后再来阅读，就能发现并体会其中的细节。 本文说一下FSOutputS...
-
【HDFS】如果文件的lastblock的最后一个chunk不满512字节，会生成checksum么？
如题，本文试图弄清楚这样一个问题：如果文件的最后一个block的最后一个chunk里的数据不足512字节，那么还会为其生成checksum么？ ...
-
【HDFS】FsDatasetSpi#adjustCrcChannelPosition
FsDatasetSpi接口里定义adjustCrcChannelPosition方法。应用场景在：append，block recovery等...