在进行数据处理的时候想把hql,和impala的sql写成脚本来执行但是oozie并没有集成impala所以需要使用shell脚本来操作。
简单的hive sql可以直接在shell脚本中写然后使用hive -e来执行比如:
hive -e 'select * from tablea;'
但是复杂的或者整个hql已经写好文件了这时候就需要使用shell来执行hive的hql文件了命令如下:
hive -f 'filename'
也可以把文件路径当作参数传入:
hive -f '$1'
同理,impala也是如此只不过命令有些差别:
执行简单命令:
impala-shell -q 'select * from tablea' -i test-cdh2
执行命令文件:
impala-shell -f 'filename' -i test-cdh2