怎么解决Hive中metaData 字符集中文问题?--详细步骤

一.首先,一般常见的错误有以及几种以及他们的解决方案:

1.      Hive中创建数据库或者表,如下图示

怎么解决Hive中metaData 字符集中文问题?--详细步骤

但是,当你去查看该数据详细信息时,中文出现了乱码,但英文不会,查看数据详情图


怎么解决Hive中metaData 字符集中文问题?--详细步骤怎么解决Hive中metaData 字符集中文问题?--详细步骤

为了解决Hive中创建表或者数据库的时候,注解等中文显示的乱码问题,需要设置MetaStore DataBase中某些字段的字符编码为utf-8


二.HiveMetaStore 配置说明

1. MySQL 授权(如果安装MySQL的时候已经配置,可忽略此步骤)

GRANT ALL PRIVILEGES ON *.* TO 'root'@'%'IDENTIFIED BY '123456' WITH GRANT OPTION ;

FLUSH PRIVILEGES ;

2.建议先建元数据库, 设置编码为 latin1.(数据库默认)

-- 如果后期, 再去修改会出问题, 如

-- drop table 无反应, createtable 字段太长等

怎么解决Hive中metaData 字符集中文问题?--详细步骤

3.创建表字段描述中文乱码等解决方案

a. 修改表字段 注解 和 表 注解

ALTERTABLE COLUMNS_V2 MODIFY COLUMN COMMENT varchar(256) character set utf8 ;

 

ALTERTABLE TABLE_PARAMS MODIFY COLUMN PARAM_VALUE varchar(4000) character set utf8 ;

 

-- b. 修改分区字段注解

ALTERTABLE PARTITION_PARAMS MODIFY COLUMN PARAM_VALUE varchar(4000) character setutf8 ;

ALTERTABLE PARTITION_KEYS MODIFY COLUMN PKEY_COMMENT varchar(4000) character setutf8 ;

 

-- c. 修改索引注解

-- ALTERTABLE INDEX_PARAMS MODIFY COLUMN PARAM_VALUE varchar(4000) character set utf8 ;

 

-- 修改 数据库 注解

ALTER TABLE DBS MODIFY COLUMN `DESC` varchar(4000)character set utf8 ;

如下图所示:

怎么解决Hive中metaData 字符集中文问题?--详细步骤


最后删除之前先建的数据库和表,重新建数据库和表。

查看结果:

怎么解决Hive中metaData 字符集中文问题?--详细步骤

最后修改配置文件的数据库连接的字符集为utf-8就可以。

怎么解决Hive中metaData 字符集中文问题?--详细步骤

如果这些都设置好了,还是乱码,记得重启MySQL服务与hive的服务。