操作版本: hive版本 1.2.1 spark版本 2.2.0
启动hive时,报如下错误提示:
问题剖析:
启动hive,提示找不到 spark相关的jar包。而且是spark安装包下lib目录下的spark-assembly-*.jar,去spark目录下查看,确实没有lib目录,更没有错误中的提升jar包。
原因: spark2.x之后, spark中的jar包重构了,删除了之前的spark-assembly-xxx.jar 了,而且也没有lib目录了,取而代之的是jars目录,用于存储所有的jar包。
然鹅,在hive的启动脚本中,依然在代码中,指定了spark1.x版本的jar包目录。
解决方案:
修改hive启动脚本中的读取spark jar包的目录,并指定为新的jar包路径即可:
重启hive即可。
交流q:824203453 大数据人工智能交流QQ群:588946830