看啥推荐读物
专注大数据和云计算技术,坚持原创,欢迎和各位业界朋友相互交流和学习。 我们坚持:有深度,技术追根溯源;有态度,无关乎对错。
今天看啥  ›  专栏  ›  大数据和云计算技术

HBase数据导入工具总结

大数据和云计算技术  · 公众号  ·  · 2018-08-28 08:00
本文对HBase常用的数据导入工具进行介绍,并结合云HBase常见的导入场景,给出建议的迁移工具和参考资料。HBase之间数据导入常用工具HBase提供了几种数据迁移工具,其中基于API调用的有CopyTable,Export&Import。基于写HDFS的有distcp,snapshot。这里要说明的是,本文作为一般性的介绍,不能忽略常用的工具distcp和snapshot,但是由于云HBase默认不开启HDFS端口,所以在云HBase上面基于HDFS的方法都是用不了的。我们推荐用户使用CopyTable进行迁移,根据我们的测试,CopyTable的性能足以支撑10T以下数据的迁移。如果您的数据量比较大(超过10T),可以联系云HBase工作人员单独为您处理。CopyTableCopyTable是HBase提供的一个数据同步工具,可以用于同步表的部分或全部数据。CopyTable通过运行Map-Red ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照