hive and spark 实训报告

1.正确安装jdk
hive and spark 实训报告2.正确配置Hadoop平台
hive and spark 实训报告
3.正确配置hive

hive and spark 实训报告4.正确配置flume
hive and spark 实训报告5.正确配置sqoophive and spark 实训报告6.首先在hive上创建leibo表hive and spark 实训报告
7.flume监控目录,上传文件到hive的leibo表下
hive and spark 实训报告
8.查看数据
hive and spark 实训报告
可视化
1.利用Hive分析“数据分析”、“大数据开发工程师”、“数据采集”等岗位的平均工资、最高工资、最低工资;
hive and spark 实训报告分析结果如下:
hive and spark 实训报告
2.利用Hive分析“数据分析”、“大数据开发工程师”、“数据采集”等大数据相关岗位在成都、北京、上海、广州、深圳的岗位数,并做饼图将结果展示出来。
hive and spark 实训报告hive and spark 实训报告分析结果如下:
hive and spark 实训报告3.利用Hive分析大数据相关岗位1-3年工作经验的薪资水平(平均工资、最高工资、最低工资),并做出条形图展示出来;
hive and spark 实训报告
hive and spark 实训报告
分析结果如下:
hive and spark 实训报告
利用sqoop技术存储到mysql数据库中
第一张表(one)
hive and spark 实训报告
hive and spark 实训报告第二张表
hive and spark 实训报告hive and spark 实训报告
第三张表:
hive and spark 实训报告
hive and spark 实训报告
连接mysql
hive and spark 实训报告将存到MySQL里的数据通过可视化展示出来
第一个可视化
hive and spark 实训报告
第二个可视化
hive and spark 实训报告
第三个可视化
hive and spark 实训报告