在HDFS中复制数据，最普通的命令是Hadoop fs -cp，但是这是一个单线程的复制方式，如果需要复制一个很大的目录和文件，需要时间将比较长。
其实Hadoop还提供了一个更加高效的复制数据命令 Hadoop distcp 源目录 目标目录
测试在10个节点的集群上复制一个24G的目录，使用Hadoop fs -cp用了7分钟，而用Hadoop distcp只用了不到1分钟，速度快了将近10倍。
同 cp命令由于，如果目标目录已存在时，复制成功后的，目标目录将会是 目标目录/源目录。如果目标目录不存在，Hadoop会自动创建目标目录，且结构为 目标目录/源目录中的子目录。
Hadoop distcp之所以能这么快，其原理是其作为一个MapReduce来运行（只有Map没有Reduce）