sqoop 从Hive导入Mysql

最新推荐文章于 2025-05-29 08:42:27 发布

原创最新推荐文章于 2025-05-29 08:42:27 发布 · 417 阅读

0 ·

本内容遵循CC 4.0 BY-SA版权协议

标签

#sqoop #mysql #hive #数据库 #hadoop

收录于

数据同步专栏收录该内容

8 篇文章

订阅专栏

本文介绍如何从Hive数据库导出数据并导入到Mysql数据库中，强调了字段匹配的重要性，特别是时间字段的处理，并提供了一个具体的sqoop导出命令示例。

本案例为从Hive中导入至Mysql

注意：hive中的字段和mysql的字段一定要一样。字段类型也要一样。

我们可以通过columns 一批字段的进行测试。一定要注意时间字段

sqoop export \
 --connect "jdbc:mysql://ip:3306/test?useUnicode=true&characterEncoding=utf-8" \
 --username root --password 123456 \
 --table t_customer_give_info \
 --columns "c_sls_cde,level,insure_name,insure_age,insure_sex,insure_mobile,group_work,top_code,register_time,prod_name,received_time,start_date,end_date,policy_name,policy_age,policy_sex,relationship" \
 --input-null-string '\\N' \
 --input-null-non-string '\\N'  \
 --export-dir "/db/CDH" \
 --input-fields-terminated-by ',' \
 -m 1