开发者学堂课程【新电商大数据平台2020最新课程:电商项目之 Sqoop 安装配置】学习笔记,与课程紧密联系,让用户快速学习知识。
课程地址:https://developer.aliyun.com/learning/course/640/detail/10502
电商项目之 Sqoop 安装配置
内容介绍
一、Sqoop 的安装
二、Sqoop 的配置
三、Sqoop 的验证
一、Sqoop 的安装、配置
1、首先在文档中找到 Sqoop 文件
2、将其复制进来后进行解压并执行到一个文件夹中
输入:
[root@node1 ~]# tar -zxvf sqoop-1.4.7.tar.gz -c /usr/local/ 进行解压,解压完成后进入到 Sqoop 中
二、Sqoop 的配置
1、输入进入命令:[root@node1~]# cd /usr/local/
[root@node1 local]# ls 可得到
2、其中需要更改一些配置,第一步更改 conf ,输入 cd conf/得到
对 sqoop-env-template.sh进行修改,修改之前配置其变量,输入:vim /etc/profile 得到
然后分别添加指令
export SQOOP _HOME=/usr/local/sqoop-1.4.7;
bin:$SQOOP_HOME/bin
3、输入 wo配置 sqoop ,再输入sourse /etc/profile使其生效,输入 jps (任务),再配置 env,并对其重命名为:
mv sqoop-env-template.sh sqoop-env.sh ,在这其中配置 vim sqoop-env.sh 得到
其中先配置 HIVE,输入:/usr/local/hive-2.1.1 ,
再配置 /usr/local/hadoop-2.7.6 ,然后保存
4、
5、保存好后,对 sqoop-site 进行更改,也可以不改前提是打开免密功能,
输入:[root@node1 conf]# vim sqoop-site-template.xml 打开免密,找到<property>后释放
三、Sqoop 的验证
1、配置 sqoop 的驱动并验证,输入 sqoop version,出现图示即为配置完成
2、输入:
vim conf/sqoop-site.xml 对连接密码进行修改,整个过程就完成了