Hadoop数据迁移distcp
准备工作
- 确认源集群(a),目标集群(b)
- 确认a集群的主节点和b集群的主节点
- 确认两个集群的网络相通
- 确认迁移模式(全量迁移还是增量迁移),这里选择全量迁移
迁移文件
- 迁移test目录下的文件至目标目录下
命令:hadoop distcp -p -m 并行度 -bandwidth 带宽 源目录 目标目录
示例:
hadoop distcp -p -m 5 -bandwidth 10 hdfs://源master:8020/test /
注意:源master为主namenode;命令行在目标主namenode上执行。文章来源地址https://www.toymoban.com/news/detail-652870.html
文章来源:https://www.toymoban.com/news/detail-652870.html
到了这里,关于Hadoop数据迁移distcp的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!