个性化阅读
专注于IT技术分析

启动Sqoop

Sqoop是具有以下结构的命令行工具

sqoop TOOL PROPERTY_ARGS SQOOP_ARGS [-- EXTRA_ARGS]
  • 工具指示操作, 例如:“导入”, “导出”。
  • PROPERTY_ARGS是Java属性, 格式为“ -Dname = value”
  • SQOOP_ARGS提到了各种Sqoop参数
  • EXTRA_ARGS用于专用连接器, 以“-”与SQOOP_ARGS分开

例:

% sqoop import --connect jdbc:mysql://localhost/hadoopguide --table widgets -m 1

输入“ sqoop帮助”以获取所有可用工具:

Sqoop命令

后端会发生什么

当你决定将数据从RDBMS移到HDFS时, 首先使用的产品是Apache Sqoop。当你请求将数据带到HDFS时, 会发生以下情况。

  1. Sqoop从Relation DB请求元数据信息。
  2. 关系数据库返回所需的请求。
  3. Sqoop基于元数据信息生成Java类。
  4. 基于主ID的分区在表中发生, 因为多个映射器将同时导入数据。
赞(0)
未经允许不得转载:srcmini » 启动Sqoop

评论 抢沙发

评论前必须登录!