CDH集群间数据迁移一、库、表schema迁移二、data迁移
工作中,需要进行不同集群间数据迁移(这里演示CDH5->CDH6),迁移分为2个步骤:1、库、表shema迁移2、数据迁移一、库、表schema迁移核心思想主要是构建建库、建表语句,传统数据仓库大概都会有stage、ods、dw、dm、default等数据分层体系。于是考虑使用shell脚本,将所有库及其下的表导出一份,然后再通过sed、awk或编辑软件的猎魔师制作建表语句。①、...