hadoop集群间文件传输

1、在没有kerberos的集群间传输

 distcp hdfs://IP:8020/xxx   hdfs://IP:8020/xxx/

2、在kerberos与非kerberos集群中

修改core-site.xml 配置

ipc.client.fallback-to-simple-auth-allowed  =  ture

重启集群
hadoop distcp -D ipc.client.fallback-to-simple-auth-allowed=true hdfs://xxx:8020/hdfs_csv/xxx  hdfs://xxx:8020/hdfs_csv/xxx/