Hive与Oracle之间利用Sqoop进行数据的导入导出

灰太狼 2021-09-15 09:34 570阅读 0赞

近期在工作中遇到了Hive与Oracle之间数据导入导出的问题，故整理如下，以供需要者参考。

一、Oracle数据导入到Hive中

/usr/bin/sqoop import \
    --connect jdbc:oracle:thin:@72.*.*.185:1521:dbcxj2 \
    --username name --password pw \
    --table tableName \
    -m 1 \
    --fields-terminated-by "," \
    --hive-database hiveName \
    --hive-table hiveTable \
    --hive-import \
    --hive-overwrite
    
    ##解释
    72.*.*.185：Oracle数据库所在服务器的IP地址；
    dbcxj2：SID号；
    name：登录Oracle数据库的用户名；
    pw：登录Oracle数据库的密码；
    tableName：需要导出数据所在表的表名
    hiveName：导入Hive中数据库的名字（数据库需要提前创建好）
    hiveTable：导入Hive中表的名字（表需要提前创建好）

二、Hive数据导入到Oracle中

/usr/bin/sqoop export \
    --connect jdbc:oracle:thin:@72.*.*.185:1521:dbcxj2 \
    --username name \
    --password pw \
    --table tableName \
    --export-dir dir \
    --fields-terminated-by ',' \
    -m 1
    
    ##解释
    72.*.*.185：Oracle数据库所在服务器的IP地址；
    dbcxj2：SID号；
    name：登录Oracle数据库的用户名；
    pw：登录Oracle数据库的密码；
    dir：hive中数据表的数据在HDFS上的绝对路径

你们在此过程中遇到了什么问题，欢迎留言，让我看看你们都遇到了哪些问题。

发表评论取消回复

表情：

评论列表（有 0 条评论，570人围观）

还没有评论，来说两句吧...

相关阅读

相关详解：Sqoop的导入和导出数据

一：导入数据导入：RDBMS ==> Hadoop [hadoop@hadoop001 bin]$ pwd /home/hadoop/app/sq

r囧r小猫/ 2024年02月19日 20:20/ 0 赞/ 43 阅读

相关 sqoop数据导出导入

一 sqoop简介： Sqoop 是一款开源的工具，主要用于在 Hadoop(Hive)与传统的数据库(mysql、postgresql…) 间进行数据的传递，可以将一

- 日理万妓/ 2023年07月08日 11:24/ 0 赞/ 18 阅读

相关利用sqoop将hive和mysql数据互导入(转)

文章目录一、sqoop 将数据从mysql 导入 hive 二、sqoop 将数据从hive导出到 mysql 一、sqoop 将数据从mysql 导入

朱雀/ 2022年10月16日 02:57/ 0 赞/ 437 阅读

相关 oracle数据的导入与导出

========================================================================================

我就是我/ 2022年07月27日 11:46/ 0 赞/ 209 阅读

相关大数据Sqoop系列之Sqoop导入导出数据

一、Sqoop介绍 Sqoop是一个用来将关系型数据库和Hadoop中的数据进行相互转移的工具，可以将一个关系型数据库(例如Mysql、Oracle)中的数据导入到

逃离我推掉我的手/ 2022年05月22日 04:11/ 0 赞/ 351 阅读

相关 sqoop的导入导出

1.Sqoop的数据导入在mysql中有一个库userdb中三个表：emp, emp\_add和emp\_contact 表emp: <table style="mar

古城微笑少年丶/ 2022年03月15日 11:14/ 0 赞/ 336 阅读

相关 sqoop数据迁移 mysql导入Hive hive导出到mysql

导入模板 sqoop import \\ \--connect jdbc:mysql://ip:3306/test \\ \--username root \\

ゝ一世哀愁。/ 2022年03月08日 15:46/ 0 赞/ 398 阅读

相关 sqoop 导入 hive

sqoop 导入 Hive 分三步： 1. 先导入`--target-dir` 指定的 HDFS 的目录中 2. 在 Hive 中建表 3. 调用 Hive 的 `

矫情吗；*/ 2022年01月25日 22:09/ 0 赞/ 441 阅读

相关 Hive与Oracle之间利用Sqoop进行数据的导入导出

近期在工作中遇到了Hive与Oracle之间数据导入导出的问题，故整理如下，以供需要者参考。一、Oracle数据导入到Hive中

灰太狼/ 2021年09月15日 09:34/ 0 赞/ 571 阅读

相关 sqoop将hive数据导入mysql

1.解压 tar -xvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz 2.配置环境变量，编辑/etc/profile文件，添...

朱雀/ 2020年10月24日 16:26/ 0 赞/ 913 阅读