高可用集羣搭建系列文章之六:Sqoop搭建

本篇文章主要介紹Sqoop的搭建,Sqoop在任一節點安裝即可。

1、下載安裝包,並解壓

下載地址
解壓命令如下:

tar -zxvf sqoop-1.4.5.bin__hadoop-2.0.4.tar.gz 

2、配置/etc/profile

export SQOOP_HOME=/home/hadoop/app/sqoop/sqoop-1.4.5
export PATH=$PATH:$SQOOP_HOME/bin

3、配置sqoop-env.sh

進入/home/hadoop/app/sqoop/sqoop-1.4.5/conf目錄,修改配置文件:

#Set path to where bin/hadoop is available
export HADOOP_COMMON_HOME=/home/hadoop/app/hadoop/hadoop-2.6.5

#Set path to where hadoop-*-core.jar is available
export HADOOP_MAPRED_HOME=/home/hadoop/app/hadoop/hadoop-2.6.5

#set the path to where bin/hbase is available
export HBASE_HOME=/home/hadoop/app/hbase/hbase-0.98.10-hadoop2

#Set the path to where bin/hive is available
#export HIVE_HOME=

#Set the path for where zookeper config dir is
export ZOOCFGDIR=/home/hadoop/app/zookeeper/zookeeper-3.4.6

4、複製mysql的驅動程序mysql-connector-java-5.0.8-bin.jar/home/hadoop/app/sqoop/sqoop-1.4.5/lib目錄

5、使用sqoop查看MySQL中的數據表

sqoop  list-databases  --connect jdbc:mysql://192.168.129.13:3306 --username root --password 123456 

在這裏插入圖片描述

6、使用sqoop導出數據到hdfs

sqoop import -m 1 -driver com.mysql.jdbc.Driver --connect jdbc:mysql://192.168.129.13:3306/test --username root --password 123456 --table user_info  --target-dir /sqoop/data
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章