求教hadoop大神啊,如何在reduce函数中要操作本地文件？

Question

求教hadoop大神啊,如何在reduce函数中要操作本地文件

Answer 1

是的，mapreduce是分布式计算的，你完全不知道会在哪里运行哪个任务，所以本地这个词对于mapreduce来说就是分布式文件系统。所以你需要把任务过程中需要使用的文件全部上传到hdfs，可以使用DistributedCache实现