Hive数据导出详解

更新时间：2023年04月14日 14:05:04 作者：沧州精神卫生中心张医师

hive是一个依赖Hadoop集群的数据处理平台，我们不仅需要对数据进行筛选处理，更需要进行导出，供我们多次重复使用，本文主要介绍了hive如何导出数据，感兴趣的小伙伴欢迎阅读

一、数据导出是什么？

hive是一个依赖Hadoop集群的数据处理平台，我们不仅需要对数据进行筛选处理，更需要进行导出，供我们多次重复使用。

二、六大帮派

1.insert

insert有两种形式，加local上传到本地路径，不加local上传到集群

代码如下（示例）：

insert加local

insert overwrite local directory '/root/export/data/student' select * from student;

insert不加local（并将数据格式化）
insert overwrite directory '/student' row format delimited fields terminated by ',' select * from student;

2.Hadoop命令导出到本地

代码如下（示例）：

hadoop dfs -get /user/hive/warehouse/hive.db/student/student.txt /root/export/data/student/

3.Hive shell命令导出

一个 > 是覆盖，两个>是追加

代码如下（示例）：

bin/hive -e 'select * from hive.student' >> /root/export/data/student/student.txt

4.export导出到HDFS上

当该hdfs路径下有文件时或表存在，都不可导，与import连用。

代码如下（示例）：

export table hive.student to '/user/hive/warehouse/hive.db/student';

5.Sqoop导出

将数据导出到window系统的mysql，并进行可视化操作

6.清除表中的数据（Truncate）——删库跑路

Truncate只能删除管理表，不能删除外部表的数据(但可以将外部表转为内部表哦，嘿嘿嘿）只是删除内部表的hdfs数据，元数据还在

内部转为外部表
alter table student set tblproperties('EXTERNAL'='TRUE')一定大写

截断表
Truncate table student；

总结

六大派别与五大帮派共同统治着数码武林，侠义精神深入人心，hive语句妇孺皆知。街头小巷上谈论着他们的英雄事迹，再一次掀起了学习hive秘籍的狂潮。或许现在人们学习的已经不再是傍身之计，更多的是对天下武功，为快不灭的热爱。有人的地方就会就有江湖，大数据时代亦是如此。

到此这篇关于Hive数据导出详解的文章就介绍到这了,更多相关Hive数据导出内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！

您可能感兴趣的文章:

数据库语言分类DDL、DCL、DML详解
今天小编就为大家分享一篇关于数据库语言分类DDL、DCL、DML详解，小编觉得内容挺不错的，现在分享给大家，具有很好的参考价值，需要的朋友一起跟随小编来看看吧
2019-03-03
mssql注入躲避IDS的方法
可能这个技巧早有人已经会了，就是利用openrowset发送本地命令。通常我们的用法是（包括MSDN的列子）
2008-06-06
Navicat premium for mac 12的安装破解图文教程
Navicat Premium是一款数据库管理工具，将此工具连接数据库,你可以从中看到各种数据库的详细信息，这篇文章主要介绍了Mac下Navicat premium for mac 12的安装破解过程,需要的朋友可以参考下
2024-01-01
MySQL与Redis如何保证数据一致性详解
在高并发的业务场景下数据库大多数情况都是用户并发访问最薄弱的环节,所以就需要使用redis做一个缓冲操作,让请求先访问到redis,而不直接访问Mysql等数据库,这篇文章主要给大家介绍了关于MySQL与Redis如何保证数据一致性的相关资料,需要的朋友可以参考下
2021-08-08
大数据量，海量数据处理方法总结
大数据量的问题是很多面试笔试中经常出现的问题，比如baidu google 腾讯这样的一些涉及到海量数据的公司经常会问到。
2010-11-11
数据库之SQL注入原理以及过程的简单介绍
这篇文章主要介绍了数据库之SQL注入原理以及过程的简单介绍,本篇文章通过简要的案例,讲解了该项技术的了解与使用,以下就是详细内容,需要的朋友可以参考下
2021-07-07
SQL表连接图解
估计很多人在学习SQL表连接的时候都会被各种类型的表连接搞得稀里糊涂的，现在好了，有了下面的图，就可以很直观的区分各种表连接了
2014-12-12
SQL查询的底层运行原理深入分析
这篇文章主要给大家介绍了关于SQL查询的底层运行原理，文中通过实例代码结束的非常详细，对大家学习或者使用SQL具有一定的参考学习价值，需要的朋友们下面来一起学习学习吧
2020-08-08
SQL数据库语句大全
本篇文章详细整理了Access、MySQL以及SQL Server三种数据库语句。对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
2021-12-12
使用Navicat导入和导出sql语句的图文教程
Navicat是MySQL非常好用的可视化管理工具,功能非常强大,能满足我们日常数据库开发的所有需求,下面这篇文章主要给大家介绍了关于使用Navicat导入和导出sql语句的相关资料,需要的朋友可以参考下
2023-03-03