sqoop——将mysql数据库的数据表导入到hdfs上

sqoop是用来将mysql数据库上的内容导入到hdfs,或者将hdfs上的数据导入mysql的(相互之间转化)一个工具。
前提:开启hdfs、yarn服务,关闭safe模式
(1)首先,在mysql上创建测验表:
sqoop——将mysql数据库的数据表导入到hdfs上
sqoop——将mysql数据库的数据表导入到hdfs上
sqoop——将mysql数据库的数据表导入到hdfs上
(2)检查是否开启任务
sqoop——将mysql数据库的数据表导入到hdfs上
(3)使用命令将表插入:
sqoop——将mysql数据库的数据表导入到hdfs上
ps:命令为sqoop import 后面跟要连接的mysql地址和数据库,后面写上mysql名称和密码,再加上表名,最后m后面跟的数字表示拆成几个MR任务,此次我选择一个。
(4)验证结果
sqoop——将mysql数据库的数据表导入到hdfs上
用yarn可视化查看MR任务成功:
sqoop——将mysql数据库的数据表导入到hdfs上
如果大家对细节有什么疑问或者补充,欢迎批评指正,一起努力!