老师讲话好快啊。讲代码的时候吧啦吧啦吧啦吧啦吧啦吧啦。但是入门还是可以的。一向入门比较喜欢看视频。看书容易走神。
2016-02-25
老师说错了,块的默认大小是64MB,而不是64字节Byte
但是ppt上写的是对的。
这个可以在hdfs-site.xml中
<property>
<name>dfs.block.size</name>
<value>67108864</value>
<description>The default block size for new files.</description>
</property>进行手动配置 我的是128G。当然是真实的分布式环境了。
但是ppt上写的是对的。
这个可以在hdfs-site.xml中
<property>
<name>dfs.block.size</name>
<value>67108864</value>
<description>The default block size for new files.</description>
</property>进行手动配置 我的是128G。当然是真实的分布式环境了。
2016-02-14
不知道是视频没讲还是我听漏了,看到排序看蒙了,没找到在哪排序的,百度查了一下原来是mapreduce默认按key排序!
2016-02-03
hdfs-site.xml
<configuration>
<property>
<name>dfs.data.dir</name>
<value>/hadoop/data</value>
</property>
</configuration>
mapred-site.xml
<configuration>
<property>
<name>mapred.job.tracker</name>
<value>localhost:9001</value>
</property>
</configuration>
<configuration>
<property>
<name>dfs.data.dir</name>
<value>/hadoop/data</value>
</property>
</configuration>
mapred-site.xml
<configuration>
<property>
<name>mapred.job.tracker</name>
<value>localhost:9001</value>
</property>
</configuration>
2016-01-21
<!-- core-site.xml -->
<property>
<name>hadoop.tmp.dir</name>
<value>/hadoop</value>
</property>
<property>
<name>dfs.name.dir</name>
<value>/hadoop/name</value>
</property>
<property>
<name>fs.default.name</name>
<value>hdfs://localhost:9000</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/hadoop</value>
</property>
<property>
<name>dfs.name.dir</name>
<value>/hadoop/name</value>
</property>
<property>
<name>fs.default.name</name>
<value>hdfs://localhost:9000</value>
</property>
2016-01-21
http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.7.1/hadoop-2.7.1.tar.gz
2016-01-21