首页 > 其他 > 详细

使sqoop能够启用压缩的一些配置

时间:2017-12-07 12:23:32      阅读:653      评论:0      收藏:0      [点我收藏+]

 

在使用sqoop 将数据库表中数据导入至hdfs时 配置启用压缩

 

 hadoop 的命令    检查本地库支持哪些  bin/hadoop checknative  

技术分享图片

 

需要配置native    要编译版本 技术分享图片

删除hadoop安装目录 lib 下的native文件夹

技术分享图片

 将解压好的native文件 拷贝到hadoop  lib目录下

 技术分享图片

技术分享图片

 

 

然后在执行 bin/hadoop checknative   就会发现有了很多东西

技术分享图片

 

然后在执行导入语句

技术分享图片

 

技术分享图片

 

使sqoop能够启用压缩的一些配置

原文:http://www.cnblogs.com/xuyou551/p/7998350.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!