前面装java、各个node的步骤按网上的资料就可以了。下面是主要的问题。
问题:
(1)按书上步骤搭建完后,使用hdfs的put命令不能上传文件,这时需要使用命令
systemctl stop firewalld.service
来关闭防火墙。不能用service iptables stop命令,会出错Failed to start iptables.service: Unit iptables.service failed to load
(2)Hadoop运行任务时一直卡在: INFO mapreduce.Job: Running job
需要修改yarn-site.xml和map-reduce.xml,使得分配给nodemanager和mapreduce的内存和CPU数不超过虚拟机的内存和CPU数。