首页 > 其他 > 详细

sqoop处理换行符--包含clob字段情况

时间:2021-01-26 22:50:27      阅读:103      评论:0      收藏:0      [点我收藏+]

一、sqoop同步oracle数据非clob字段:

要处理换行符,在sqoop脚本中,参数使用下面任意一个即可

#替换为空 
--hive-delims-replacement "" 
#删除
--hive-drop-import-delims   

二、sqoop同步oracle数据clob字段
clob字段一般包含大量文本,必然包含换行符,使用上面参数没有作用,需要使用下面参数:

#指定clob列为String类型
--map-column-java CLOB列=String 

例子如下:
oracle这张表可以看到YIWU字段为clob字段,打开明显有换行符
技术分享图片
没有使用该参数,可以看到Hive这边从换行符位置开始全错位了。
技术分享图片
使用该参数
技术分享图片
可以看到结果已经正常
技术分享图片


学习交流,有任何问题还请随时评论指出交流。

sqoop处理换行符--包含clob字段情况

原文:https://www.cnblogs.com/rango-lhl/p/14331843.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!