使用shell脚本执行hive、sqoop命令的方法

 更新时间:2018年06月19日 15:55:55   作者:high2011  
今天小编就为大家分享一篇使用shell脚本执行hive、sqoop命令的方法,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧

1、test.sh脚本内容如下:

#!/bin/bash

#CURR_DATE=`date +"%Y-%m-%d %H:%M:%S"`------>不能使用
v_sql="insert into origin_ennenergy_energytrade.test2 values('"$(date +"%Y-%m-%d %H:%M:%S")"','"Y"')"
echo $v_sql

#insert into origin_ennenergy_energytrade.test2 values('2016-08-09 10:39:44','Y')

hive -e "$v_sql;"
sqoop export --connect jdbc:mysql://ip:3306/test23?characterEncoding=utf8 --username root --password 123--table test2--export-dir /user/hive/warehouse/origin_ennenergy_energytrade.db/test2/* --input-fields-terminated-by "\t" --update-mode allowinsert --update-key times;

2、执行:

sh test.sh

以上这篇使用shell脚本执行hive、sqoop命令的方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持脚本之家。

相关文章

  • shell脚本一键同时推送代码至github和gitee的解决办法

    shell脚本一键同时推送代码至github和gitee的解决办法

    这篇文章主要介绍了shell脚本一键同时推送代码至github和gitee的解决办法,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
    2020-09-09
  • linux自动清理日志脚本分享

    linux自动清理日志脚本分享

    这篇文章主要介绍了linux自动清理日志脚本,主要功能是清理所有目录的日志,根据给定日志目录,删除时间 结合crontab进行清理日志
    2014-01-01
  • 让代码整洁、过程清晰的BASH Shell编程技巧

    让代码整洁、过程清晰的BASH Shell编程技巧

    这篇文章主要介绍了让代码整洁、过程清晰的BASH Shell编程技巧,特别是大型的Shell项目中,这10个经验之谈可以帮助你写出代码整洁、过程清晰的代码,需要的朋友可以参考下
    2014-07-07
  • 几个常用的Linux操作系统监控脚本代码

    几个常用的Linux操作系统监控脚本代码

    本文介绍了几个常用的Linux监控脚本,可以实现主机网卡流量、系统状况、主机磁盘空间、CPU和内存的使用情况等方面的自动监控与报警。根据自己的需求写出的shell脚本更能满足需求,更能细化主机监控的全面性
    2013-07-07
  • 用shell脚本防ssh和vsftpd暴力破解的详解讲解

    用shell脚本防ssh和vsftpd暴力破解的详解讲解

    新近刚上的FTP备份服务器,例行检查/var/log/secure日志时,发现不少sshd和vsftpd失败认证信息,很明显有人想用暴力破解工具窃取密码,所以需要编写一个安全脚本防止
    2014-01-01
  • shell 命令统计代码行数的简单代码

    shell 命令统计代码行数的简单代码

    这篇文章主要介绍了shell 命令统计代码行数的简单代码,文中给大家提到了统计行数、字符数、字节数的shell脚本 ,需要的朋友可以参考下
    2018-04-04
  • shell中的curl网络请求的实现

    shell中的curl网络请求的实现

    本文主要介绍了shell中的curl网络请求的实现,文中通过示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
    2022-02-02
  • Linux中Shell脚本判断文件/文件夹是否存在方法

    Linux中Shell脚本判断文件/文件夹是否存在方法

    很多时候我们在做运维的时候,我们需要做一些自动化,这时我们就需要写一些shell脚本,既然要用到shell脚本,就免不了文件操作,这篇文章主要给大家介绍了关于Linux中Shell脚本判断文件/文件夹是否存在的相关资料,需要的朋友可以参考下
    2023-06-06
  • 用内置变量调试shell脚本的方法

    用内置变量调试shell脚本的方法

    这篇文章主要介绍了用内置变量调试shell脚本的方法,需要的朋友可以参考下
    2014-03-03
  • shell中set设置-e和 -x的用法

    shell中set设置-e和 -x的用法

    本文主要介绍了shell中set设置-e和 -x的用法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2023-06-06

最新评论