mapreduce执行过程中哪些数据存储在hdfs

2024-12-25 17:20:11
推荐回答(1个)
回答1:

文件是按照块来存储的,比如配置的每块大小为64M,那么5G的文件,会分成5*1024/64=80块,每个块会在不同节点上存多份。你上面说的依次写入datanode,是指将每个块依次写入。 读取的时候,也是一块一块来读的,当然,这些都已经被HDFS的客户端封...