Kylin运维中遇到的问题分享

版本kylin3.10  Hdfs3 Hive2.1Hbase2.1

问题一： reset metadata后导入失败

 ERROR [http-nio-7070-exec-8] controller.BasicController:63 :
java.lang.NullPointerException

重启一下就解决了  可能是因为元数据不存在所致

 

问题二 ，导入数据之后没反应

 导入数据之后没反应 查看web 一直在pending 中 查看日志

WARN  [FetcherRunner 340138478-60] threadpool.FetcherRunner:56 : There are too many jobs running, Job Fetch will wait until next schedule time

查看yarn 发现资源不够用了 所以一直在等待 等待yarn任务完成吧

问题三  任务执行失败，提示wrong FS  expected hdfs://nameservice

Wrong FS: hdfs://uhadooxxx:8020/kylin/kylin_metadata/kylin-074a351d-2f4e-a08b-244c-3824e358f817/kylin_intermediate_tmonitor_main_page_statistics_cube_f7, expected: hdfs://nameservice1

这个现象出现在hdfs 做了ha之后，应该是由于新的hdfs地址没有在kylin元数据中更新所致的 尝试重启  更新hive 元数据 都没有效果 后来 metadata.sh reset 了之后解决   但是reset 会导致kylin清空元数据  需要和开发沟通