课程
/云计算&大数据
/大数据
/Hadoop基础及演练
为什么???
2018-06-02
源自:Hadoop基础及演练 2-1
正在回答
块的大小设置原则:最小化寻址开小。
块越大寻址时间越短,
传输一个由多个块的组成的文件取决于磁盘传输速率。如寻址时间约为10ms,传输速率为100MB/S,为了使寻址时间仅占传输时间的1%,块的大小设置约为100MB,默认大小是64MB,现在在实际身缠中都是128MB了,随着新一代磁盘去东区传输速率的提升,块的大小将会被设置的更大。
注意:块的大小太大的话,一个map任务处理一个块,那任务数就变少了,作业运行速度也就变慢了。
codxiao 提问者
叁金
举报
与大数据密不可分的Hadoop框架,你值得学习
1 回答请问怎么在hdfs3中配置块大小和副本数?
1 回答学习大数据
2 回答大数据与后端
1 回答为何hdfs不适合文件并发写入?
1 回答你好,如何上传大文件?