Sqoop-1.4.4工具import和export使用详解

发布时间:2017-1-23 16:41:26 编辑:www.fx114.net 分享查询网我要评论
本篇文章主要介绍了"Sqoop-1.4.4工具import和export使用详解 ",主要涉及到Sqoop-1.4.4工具import和export使用详解 方面的内容,对于Sqoop-1.4.4工具import和export使用详解 感兴趣的同学可以参考一下。

转自:http://blog.csdn.net/wodatoucai/article/details/46343291

Sqoop可以在HDFS/Hive和关系型数据库之间进行数据的导入导出,其中主要使用了import和export这两个工具。这两个工具非常强大,提供了很多选项帮助我们完成数据的迁移和同步。比如,下面两个潜在的需求:

  1. 业务数据存放在关系数据库中,如果数据量达到一定规模后需要对其进行分析或同统计,单纯使用关系数据库可能会成为瓶颈,这时可以将数据从业务数据库数据导入(import)到Hadoop平台进行离线分析。
  2. 对大规模的数据在Hadoop平台上进行分析以后,可能需要将结果同步到关系数据库中作为业务的辅助数据,这时候需要将Hadoop平台分析后的数据导出(export)到关系数据库。

这里,我们介绍Sqoop完成上述基本应用场景所使用的import和export工具,通过一些简单的例子来说明这两个工具是如何做到的。

工具通用选项

import和export工具有些通用的选项,如下表所示:

上一篇:前端小知识--背景图片百分数是如何计算的
下一篇:PHP Ueditor 富文本编辑器

相关文章

相关评论