Sqoop安装&配置


写在前面

        Sqoop是用来实现结构型数据(如:关系型数据库RDBMS)和Hadoop之间进行数据迁移的工具。它充分利用了MapReduce的并行特点以批处理的方式加快数据的传输,同时也借助MapReduce实现容错。

        将来sqoop在使用的时候有可能会跟那些系统或者组件打交道?

        HDFS, MapReduce, YARN, ZooKeeper, Hive, HBase, MySQL

        sqoop就是一个工具, 只需要在一个节点上进行安装即可。

        安装 sqoop 的前提是已经具备 java 和 hadoop 的环境!


        Hadoop安装地址:https://blog.****.net/wsjslient/article/details/109603446

        JDK安装地址:https://blog.****.net/wsjslient/article/details/109521250


一、解压安装包

        这里我已经将sqoop解压到目录下,并进行了重命名;

Sqoop安装&配置


二、拷贝jar包

        进入sqoop的lib目录下,分别拷贝如下四个jar包;

Sqoop安装&配置
Sqoop安装&配置


三、配置Sqoop

        进入sqoop的conf/目录下,配置sqoop.env.sh;

Sqoop安装&配置
Sqoop安装&配置


四、配置环境变量

Sqoop安装&配置
Sqoop安装&配置


五、测试连接

        语法查询mysql的所有数据库;

Sqoop安装&配置

        以上均顺利配置完成,恭喜你完成配置!


PS:作者是一枚刚入编程的小白,如果有写错或者写的不好的地方,欢迎各位大佬在评论区留下宝贵的意见或者建议,敬上!如果这篇博客对您有帮助,希望您可以顺手帮我点个赞!不胜感谢!

原创作者:wsjslient

作者主页:https://blog.****.net/wsjslient

参考文档:https://https://blog.****.net/lv_hulk/article/details/88574487/