Sqoop安装&配置
写在前面
Sqoop是用来实现结构型数据(如:关系型数据库RDBMS)和Hadoop之间进行数据迁移的工具。它充分利用了MapReduce的并行特点以批处理的方式加快数据的传输,同时也借助MapReduce实现容错。
将来sqoop在使用的时候有可能会跟那些系统或者组件打交道?
HDFS, MapReduce, YARN, ZooKeeper, Hive, HBase, MySQL
sqoop就是一个工具, 只需要在一个节点上进行安装即可。
安装 sqoop 的前提是已经具备 java 和 hadoop 的环境!
Hadoop安装地址:https://blog.****.net/wsjslient/article/details/109603446
JDK安装地址:https://blog.****.net/wsjslient/article/details/109521250
一、解压安装包
这里我已经将sqoop解压到目录下,并进行了重命名;
二、拷贝jar包
进入sqoop的lib目录下,分别拷贝如下四个jar包;
三、配置Sqoop
进入sqoop的conf/目录下,配置sqoop.env.sh;
四、配置环境变量
五、测试连接
语法查询mysql的所有数据库;
以上均顺利配置完成,恭喜你完成配置!
PS:作者是一枚刚入编程的小白,如果有写错或者写的不好的地方,欢迎各位大佬在评论区留下宝贵的意见或者建议,敬上!如果这篇博客对您有帮助,希望您可以顺手帮我点个赞!不胜感谢!
原创作者:wsjslient |
参考文档:https://https://blog.****.net/lv_hulk/article/details/88574487/ |