本文共 430 字，大约阅读时间需要 1 分钟。

fileinputformat切片机制

本地运行时为切片32m，Hadoop1.x集群切片为64m，Hadoop2.x集群切片为128m

要注意的事情是在计算切片大小的时候我们如果要改动切片的大小blocksize，那么就要在这个公式上

面下手：Math.max(minSize,Math.min(maxsize,blocksize)) 一般值为128m，而且maxSize默

认为long的最大值，minSize默认为1。

如下：

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-mg5NHHmZ-1603113740530)(https://s1.ax1x.com/2020/10/14/0IabSP.png)]

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-9zX6dZE8-1603113740532)(https://s1.ax1x.com/2020/10/14/0I1yGD.png)]

转载地址：http://dicki.baihongyu.com/