如何计算校验和?

时间:2018-04-16 09:51:57

标签: hadoop hdfs hadoop2 checksum crc32

当我在终端中使用hdfs dfs -checksum /file.txt时,它给出了 /file.txt MD5-of-0MD5-of-512CRC32C 000002000000000000000000ccfadcfdcff630efa5628fb72620d535

如何计算?

根据我的理解,crc-32用于计算文件的校验和。

crc-32如何计算校验和值?

1 个答案:

答案 0 :(得分:0)

使用的CRC32不是CRC32C。它使用3个流并行计算,因此比CRC32更快。对于每个进程,使用的多声道也是不同的(0x1EDC6F41,反向0x82F63B78)。 使用过的algorythm仍然与CRC32相同。

如果你想看到algorythm - have a look here on WIKI