1.从现有集群中挑两台机器作为新集群的机器。 2.采用DISTCP的方式将数据全量拷贝过去 3.将hadoop集群中的其他组件逐个迁移 1.HIVE迁移需要修改HIVE元数据中SDS/DBS中相应的HDFS的路径 2.其他组件修改相应的配置 3.修改HDFS上相应目录的权限,DISTCP实际执行的是mapreduce任务,写入新的集群的数据都是采用的启动任务的linux用户权限。 4.检查数据,检查各个组件是否正常工作。 完。
HADOOP集群迁移
点赞
收藏
HADOOP集群迁移
1.从现有集群中挑两台机器作为新集群的机器。 2.采用DISTCP的方式将数据全量拷贝过去 3.将hadoop集群中的其他组件逐个迁移 1.HIVE迁移需要修改HIVE元数据中SDS/DBS中相应的HDFS的路径 2.其他组件修改相应的配置 3.修改HDFS上相应目录的权限,DISTCP实际执行的是mapreduce任务,写入新的集群的数据都是采用的启动任务的linux用户权限。 4.检查数据,检查各个组件是否正常工作。 完。