postgresql 实现数据的导入导出

更新时间：2020年12月29日 15:53:56 作者：kukudehui

这篇文章主要介绍了postgresql 实现数据的导入导出，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧

最近想把服务器上的测试数据库数据导到我本地的电脑上，本地电脑数据库是安装在windows系统下

之前没使用过pgsql，网上找了点资料，记入如下：

一，首先把服务器上的数据进行备份

pg_dump -U 用户名数据库名（-t 表名）> 数据存放路径

二，把.sql 文件下载到本地之后，首先切换到pgsql路径下的bin目录

然后执行这条命令：

-d：数据库名

-h：地址

-p：端口

-u：用户名

-f：sql文件路径

之后输入口令：

这样就可以了！

补充：Sqoop从PostgreSQL导入Hive遇到的两个问题

昨天尝试使用Sqoop从PostgreSQL向Hive中迁移数据，过程中遇到两个问题，在此记录一下，以备以后遇到类似问题可以快速找到解决方案。

问题1：当PostgreSQL表中有json类型时Sqoop命令报以下错误

No Java type for SQL type 1111 for

column voting_info

解决方案：sqoop命令中添加以下类型映射

--map-column-hive voting_info=String --map-column-java voting_info=String

问题2：如何指定PostgreSQL中指定schema名称

PostgreSQL中的对象属于三层模型，即database->schema->table。PostgreSQL中一般包含多个database，每个database包含多个schema，schema下包含多个表。因此使用sqoop抽取数据时有时需要指定表是属于哪个schema。

解决方案：sqoop命令中添加以下类型映射

-- --schema szyd

下面给出一个常用的从PostgreSQL往Hive导数据的sqoop-import脚本，仅供参考：

sqoop-import --connect jdbc:postgresql://$PG_HOST:$PG_PORT/$PG_SID \
--username $PG_UNAME --password $PG_PWD --table $TABLE_NAME \
--hive-import --hive-table $TABLE_NAME --hive-overwrite \
--null-string '\\N' --null-non-string '\\N' --hive-drop-import-delims \
-m 1 --map-column-hive voting_info=String --map-column-java voting_info=String -- --schema $SCHEMA_NAME

以上为个人经验，希望能给大家一个参考，也希望大家多多支持脚本之家。如有错误或未考虑完全的地方，望不吝赐教。

您可能感兴趣的文章:

PostgreSQL误删数据库该怎么办详解
这篇文章主要介绍了PostgreSQL中误删数据库的恢复方法,包括备份恢复、归档日志恢复和操作系统层面的快照恢复,文中通过代码介绍的非常详细,需要的朋友可以参考下
2025-03-03
PostgreSQL数据库中Sequence的使用方法详解
在 PostgreSQL 数据库中,Sequence 是一种特殊的表对象,主要用于生成按顺序递增或递减的数字序列,通常用于需要唯一标识符的场景,例如自增 ID,以下是如何在 PostgreSQL 中使用 Sequence 的详细步骤,需要的朋友可以参考下
2024-11-11
Postgres 创建Role并赋予权限的操作
这篇文章主要介绍了 Postgres 创建Role并赋予权限的操作，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
2021-01-01
Postgresql通过查询进行更新的操作
这篇文章主要介绍了Postgresql通过查询进行更新的操作，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
2021-01-01
PostgreSQL实现一个通用标签系统
这篇文章主要给大家介绍了关于利用PostgreSQL实现一个通用标签系统的相关资料，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
2019-01-01
PostgreSQL 角色与用户管理介绍
这篇文章主要介绍PostgreSQL 角色与用户管理相关知识，需要的朋友可以参考下
2013-08-08
postgres主备切换之文件触发方式详解
这篇文章主要介绍了postgres主备切换之文件触发方式详解，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
2020-12-12
PostgreSQL通过oracle_fdw访问Oracle数据的实现步骤
通过类似于Oracle数据库DBLINK的方式去实现PostgreSQL访问oracle数据库，本地搭建测试环境并配置相关配置，接下来通过本文给大家分享PostgreSQL通过oracle_fdw访问Oracle数据的实现步骤，感兴趣的朋友一起看看吧
2021-05-05
PostgreSQL常用的备份方式总结
这篇文章主要介绍了PostgreSQL的多种备份方法,包括逻辑备份和物理备份,以及归档日志备份,文中通过代码介绍的非常详细,需要的朋友可以参考下
2025-02-02
如何解决PostgreSQL执行语句长时间卡着不动不报错也不执行的问题
某日开发同事上报一sql性能问题,一条查询好似一直跑不出结果,查询了n小时,还未返回结果,这篇文章主要给大家介绍了关于如何解决PostgreSQL执行语句长时间卡着不动不报错也不执行问题的相关资料,需要的朋友可以参考下
2024-02-02