主页 > 知识库 > hive-shell批量命令执行脚本的实现方法

hive-shell批量命令执行脚本的实现方法

热门标签:服务外包 百度竞价排名 网站排名优化 呼叫中心市场需求 铁路电话系统 地方门户网站 AI电销 Linux服务器

如下所示:

#!/usr/bin/bash
HADOOP_HOME="/opt/module/cdh-5.3.6-ha/hadoop-2.5.0-cdh5.3.6"
HIVE_HOME='/opt/module/cdh-5.3.6-ha/hive-0.13.1-cdh5.3.6'

####### execute hive ######

sql=$(cat !EOF
use db_01;
drop table dept_nopart;
create table IF NOT EXISTS dept_part(
deptno int,
dname string,
loc string
)
partitioned by (day string)
ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t';


!EOF)
############ execute begin  ###########
echo $sql
cd $HIVE_HOME
bin/hive -e "$sql"

cd $HADOOP_HOME
bin/hdfs dfs -mkdir -p /hive/warehouse/db_01.db/dept_part/day=20150913 ;
bin/hdfs dfs -put /opt/data/dept.txt /hive/warehouse/db_01.db/dept_part/day=20150913 ;

cd $HIVE_HOME
bin/hive -e "use db_01;msck repair table dept_part;"

exitCode=$?
if [ $exitCode -ne 0 ];then
     echo "[ERROR] hive execute failed!"
     exit $exitCode
fi

以上这篇hive-shell批量命令执行脚本的实现方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持脚本之家。

您可能感兴趣的文章:
  • python处理数据,存进hive表的方法
  • python导出hive数据表的schema实例代码
  • php ZipArchive实现多文件打包下载实例
  • sql server编写archive通用模板脚本实现自动分批删除数据
  • mysql 5.7.18 Archive压缩版安装教程
  • mysql 5.7 zip archive版本安装教程
  • 使用shell脚本执行hive、sqoop命令的方法
  • shell中循环调用hive sql 脚本的方法
  • 如何在python中写hive脚本

标签:铜川 衡水 仙桃 黄山 兰州 湖南 湘潭 崇左

巨人网络通讯声明:本文标题《hive-shell批量命令执行脚本的实现方法》,本文关键词  ;如发现本文内容存在版权问题,烦请提供相关信息告之我们,我们将及时沟通与处理。本站内容系统采集于网络,涉及言论、版权与本站无关。
  • 相关文章
  • 收缩
    • 微信客服
    • 微信二维码
    • 电话咨询

    • 400-1100-266