sqoop应用实例1

落日映苍穹つ 2022-08-27 04:47 155阅读 0赞

sqoop的简单应用：

需求：先将hive中的数据表wordcount中的数据导入到mysql数据库中；

hive数据表查看：

![SouthEast][]

其在hdfs中的文件位置：

![SouthEast 1][]

建立mysql 数据表，我们也叫做wordcount：

建表语句：

CREATE TABLE wordcount (    
  name varchar(300),    
  id int(11) DEFAULT 0   
);

将上述hive中的数据导入到mysql数据库 wordcount表中：

sqoop export --connect jdbc:mysql://icity0:3306/sqoop --username root --password root --table wordcount --input-fields-terminated-by '\\t' --export-dir '/user/hive/warehouse/wordcount'

注：如果使用hive 执行mapreduce生成的数据结果，其默认的分割符是‘\\001',由于此处使用的有hdfs导入到hive的数据，其分隔符是'\\t',具体见hive使用实例1[点击打开链接][Link 1]；

/user/hive/warehouse为hive文件保存的默认位置。

如图所示：

![SouthEast 2][]

查看mysql数据库wordcount数据表：

![SouthEast 3][]

支持，sqoop的简单实例运行完成。

[SouthEast]: /images/20220824/8ab897ab67f24dccb6aef372a7c1ae4b.png
[SouthEast 1]: /images/20220824/4e261e6a6248419c94851231dfec51f6.png
[Link 1]: http://blog.csdn.net/wangmuming/article/details/25226951
[SouthEast 2]: /images/20220824/d91f2c046bc04533bb131551fcfee4be.png
[SouthEast 3]: /images/20220824/6d980db92305455193548d6ab0e2ff22.png

发表评论取消回复

表情：

评论列表（有 0 条评论，155人围观）

还没有评论，来说两句吧...

相关阅读

相关 sqoop应用实例1

sqoop的简单应用：需求：先将hive中的数据表wordcount中的数据导入到mysql数据库中； hive数据表查看： ![Sou

落日映苍穹つ/ 2022年08月27日 04:47/ 0 赞/ 156 阅读

相关 hive应用实例1

我们沿用之前hadoop wordcount的结果数据： \[hadoop@icity0 ~\]$ hadoop fs -cat /wc/out/part-r-00000

Myth丶恋晨/ 2022年08月27日 04:42/ 0 赞/ 114 阅读

相关 sqoop1.4.6安装

sqoop1.4.6 安装配置下载地址： [http://sqoop.apache.org][http_sqoop.apache.org] 文档地址： [h

àì夳堔傛蜴生んèń/ 2022年08月09日 17:37/ 0 赞/ 125 阅读

相关 Sqoop简介与实例

Sqoop(发音：skup)是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql…)间进行数据的传递，可以将一个关系型数据库（例

た入场券/ 2022年07月13日 09:42/ 0 赞/ 171 阅读

相关 sqoop数据导入导出应用案例

sqoop数据导入导出应用案例 sqoop导入数据 1 语法 2 测试数据

快来打我*/ 2022年06月12日 10:20/ 0 赞/ 256 阅读

相关大数据Sqoop系列之Sqoop1.x安装部署

1. 下载链接 [http://mirrors.shuosc.org/apache/sqoop/1.4.6/sqoop-1.4.6.bin\_\_hadoop-2.0.4

客官°小女子只卖身不卖艺/ 2022年06月04日 02:23/ 0 赞/ 199 阅读

相关安装配置Sqoop-1.4.7

安装配置Sqoop-1.4.7 1、下载并上传sqoop相关安装，并将其解包解压 ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5

客官°小女子只卖身不卖艺/ 2022年01月21日 01:37/ 0 赞/ 263 阅读

相关 Sqoop的基础应用

实验目的要求 1. 了解ET了工具Sqoop； 2. 学会安装配置Sqoop； 3. 学会使用数据迁移框架Sqoop； 4. 使用Sqoop导入MySQL到HDF

╰+攻爆jí腚メ/ 2022年01月12日 15:33/ 0 赞/ 267 阅读

相关 hadoop sqoop 实例

hadoop sqoop （实例）day-1 sqoop：是一款开源的工具，主要用于在Hadoop与传统的数据库（mysql）间进行数据的传递，可以将一个关系型数据库中的

约定不等于承诺〃/ 2021年11月11日 14:32/ 0 赞/ 293 阅读

相关 Sqoop使用实例讲解

摘要：本文主要讲了笔者在使用sqoop过程中的一些实例一、概述与基本原理 Apache Sqoop（SQL-to-Hadoop）

蔚落/ 2021年09月11日 07:06/ 0 赞/ 559 阅读