大数据技术与应用 实验六报告 Hive安装配置
大数据技术与应用 实验六报告 Hive安装配置
学习如何hive并对其进行安装与配置,在安装Hive之前要先安装Mysql。
一、安装Mysql
(1)在Windows下进行下载Mysql
http://dev.mysql.com/get/mysql-community-release-el7-5.noarch.rpm
(2)将压缩包从Windows传输到Linux当前目录下:
SecureCRT 【File】→【Connect SFTP Session】开启sftp操作
put F:\Mysql\mysql-community-release-el7-5.noarch.rpm
(3)解压:rpm -ivh mysql-community-release-el7-5.noarch.rpm
(4)安装;yum install mysql-community-server
(5)重启mysql服务:service mysqld restart (以后开机不需启动mysql)
(6)进入mysql:mysql -u root
(7)配置文件/etc/my.cnf加上编码配置:[mysql] default-character-set =utf8
远程连接设置:
把在所有数据库的所有表的所有权限赋值给位于所有IP地址的root用户:
mysql> grant all privileges on . to [email protected]’ %‘identified by ‘root’;
mysql>flush privileges; 刷新权限
如果是新用户而不是root,则要先新建用户。
二、Hive安装与配置
(1)下载压缩包
官网下载地址:http://mirror.bit.edu.cn/apache/hive/
选择apache-hive-2.3.4-bin.tar.gz,在Windows里面下载。
(2)将压缩包从Windows传输到Linux当前目录下
SecureCRT 【File】→【Connect SFTP Session】开启sftp操作。
put F:\Hive\apache-hive-2.3.5-bin.tar.gz
(3)解压
解压安装到指定目录下/home/sun(/home是系统自带目录,之下的/sun是自己创建的)
tar -zxvf apache-hive-2.3.5-bin.tar.gz -C /home/sun
修改解压目录名为hive。
mv apache-hive-2.3.5-bin.tar hive
(4)修改环境变量
命令:vi etc/profile
添加HIVE_HOME安装路径:
命令:Source etc/profile,使其生效。
运行:hive --version
出现版本号及安装成功‘。
(5)配置hive-env.sh
进入/home/sun/hive/conf目录,修改hive-env.sh.template的文件名为hive-env.sh。(可以使用cp或者mv命令)
cp hive-env.sh.template hive-env.sh
修改Hadoop的安装路径
HADOOP_HOME=/home/sun/hadoop-2.7.3
修改Hive的conf目录的路径
export HIVE_CONF_DIR=/home/sun/hive/conf
6、配置hive-site.xml
进入/home/sun/hive/conf目录,修改default.xml.template的文件名为hive-site.xml。(可以使用cp或者mv命令)
cp hive- default.xml.template hive-site.xml
在最后添加以下属性:
三、MySQL Connector/J安装
1、下载压缩包
官网下载地址:http://ftp.ntu.edu.tw/MySQL/Downloads/Connector-J/
mysql-connector-java-5.1.47.tar.gz
2、将压缩包从Windows传输到Linux当前目录下¬¬
SecureCRT 【File】→【Connect SFTP Session】开启sftp操作
put F:\Mysql\mysql-connector-java-5.1.47.tar.gz
3、解压
解压到指定目录下/home/sun(/home是系统自带目录,之下的/sun是自己创建的)
5、拷贝驱动包
将驱动包mysql-connector-java-5.1.47-bin.jar复制到/home/sun/hive/lib目录中。
四、启动hive
1、启动Hadoop:start-all.sh
2、初始化Metastore架构:schematool -dbType mysql -initSchema
3、启动Hive:hive
hive> 进入hive shell
4、创建/删除/修改/查看 数据库、表、视图,向表中装载数据,查询数据等等。