微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

apache 大数据平台搭建(sqoop)

1.官网下载安装包:

http://mirrors.hust.edu.cn/apache/sqoop/1.4.6/

2.安装sqoop

  1. 上传安装包并解压
    上传安装包 sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz 到服务器上,进入安装包所在的路径执行解压命令:
tar -zxf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C /opt/module/

mv sqoop-1.4.6.bin__hadoop-2.0.4-alpha sqoop-1.4.6
  1. 修改配置文件
    进入到/opt/module/sqoop-1.4.6/conf 目录,重命名配置文件
mv sqoop-env-template.sh sqoop-env.sh

vim sqoop-env.sh
export HADOOP_COMMON_HOME=/opt/module/hadoop-3.1.3
export HADOOP_MAPRED_HOME=/opt/module/hadoop-3.1.3
export HIVE_HOME=/opt/module/hive-3.1.2
export ZOOKEEPER_HOME=/opt/module/zookeeper-3.5.7
export ZOOCFGDIR=/opt/module/zookeeper-3.5.7/conf

  1. 拷贝驱动
    将jdbc驱动@R_502_5976@拷贝到sqooplib目录中去

  2. 测试

sqoop list-databases --connect jdbc:MysqL://hadoop101:3306/ --username root --password yourpassword

image

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 [email protected] 举报,一经查实,本站将立刻删除。

相关推荐