sqoop将hive数据导入mysql

最新推荐文章于 2025-05-29 08:42:27 发布

原创最新推荐文章于 2025-05-29 08:42:27 发布 · 1.1k 阅读

1 ·

本内容遵循CC 4.0 BY-SA版权协议

收录于

大数据专栏收录该内容

15 篇文章

订阅专栏

本文介绍使用Sqoop命令将Hive中的数据导出到MySQL数据库的方法，包括命令参数详解及注意事项，如数据库配置、数据字段一致性、字段长度检查及分割字符设置。

命令：

./sqoop-export --connect jdbc:mysql://192.168.3.8:3306/db1 --username root --password 123456 --table table1--fields-terminated-by '\001' --export-dir 'hdfs://hadoop1:9000/tmp/hive/warehouse/table1' --input-null-string '\\N' --input-null-non-string '\\N'

注意：

1数据库配置正确；

2.hive与mysql数据表字段一致；

3:数据字段长度能够支撑hive,不能出现TOO LONG;

4.分割字符确认；hive默认是'\001',sqoop默认是','