💡
原文中文，约26600字，阅读约需64分钟。
📝
内容提要
本文介绍了将80TB的HBase数据库迁移到Amazon EMR的操作，包括历史数据迁移和增量数据迁移的机制，迁移方案的核心操作，以及资源清理和已知错误的解决方法。
🎯
关键要点
-
用户需要将80TB的HBase数据库迁移到Amazon EMR。
-
迁移分为历史数据迁移和增量数据迁移，分别使用HBase Snapshot和HBase Replication机制。
-
HBase Snapshot创建快照时只复制元数据，不会立即复制表数据。
-
HBase Replication用于实现增量数据同步，基于WAL日志回放。
-
迁移方案包括基于Snapshot和Replication的全量快照和增量同步。
-
迁移的核心操作包括：添加目标集群为peer、创建快照、导出快照、还原快照、恢复数据同步。
-
演练环境使用HBase 1.4.9和EMR版本5.23.0，集群配置为3个Master Node和25个Core Node。
-
在迁移过程中需要监控数据表目录容量和执行时间，确保操作顺序正确。
-
在迁移过程中可能会遇到AWS凭证错误、HFile丢失、HDFS空间耗尽等问题。
-
迁移完成后需核对Source Cluster和Sink Cluster之间的数据一致性。
➡️
