`
J2EE小熊
  • 浏览: 108953 次
  • 性别: Icon_minigender_1
  • 来自: 广州
社区版块
存档分类
最新评论

Postgresql备份和恢复------SQL转储篇

阅读更多

您是否遇到过因为不小心而删除了某个数据库表,或者是存放数据库的磁盘损坏了的情况呢?如果碰到这种情况,我相信您会觉得非常的沮丧,因为您努力了几个星期的工作成果可能就付之东流了。和任何包含珍贵数据的东西一样,PostgreSQL数据库也应该经常备份。如果您将数据存放在 PostgreSQL 表中,您就可以定时的进行数据库备份,从而避免发生上面的悲剧。PostgreSQL 自带有内置工具来执行备份工作,而且在系统出现损坏或是意外时,您可以通过这些工具进行“回滚”,并通过以前保存的快照将系统恢复到其初始的状态。


1. 综述;

PostgreSQL数据库从备份 PostgreSQL 数据有三种完全不同的方法:

SQL 转储

文件系统级别备份

在线备份

每种备份都有自己的优点和缺点,下面主要介绍SQl转储的方法;


2. 数据备份;

SQL 转储的方法是创建一个文本文件,这个文本里面都是 SQL 命令,当把这个文件回馈给服务器时,将重建与转储时状态一样的数据库。


2.1 pg_dump;

PostgreSQL 自带的内置备份工具叫做 pg_dump。这个工具是通过一系列的SQL语句读取某个指定的数据库并复制其中的内容,以它作为快照并用于日后的数据恢复。客户端到服务器端的连接是用于执行备份工作。这些备份文件就是前面所讲的快照并可以用于日后的数据恢复。而保证客户端与服务器端的连接是执行备份所必需的。这条命令的基本用法是:

pg_dump dbname > outfile

注:在进行上述工作之前,首先请确保您具有登录到服务器并访问您将要备份的数据库或表的权限。您可以通过使用PostgreSQL 命令行客户端——psql,进行服务器登录。在客户端中输入主机名(-h),用户名(-u)和密码(-p),以及数据库名,然后就可以校验您是否被授权访问。

使用 pg_dump 非常的简单——只需要在命令提示符后面输入将要导出的数据库名就可以进行备份工作了,如下例所示(根据您自己的安装路经更改PostgreSQL 路径):

xiaop@xiaop-laptop:~$ /usr/lib/postgresql/8.2/bin/pg_dump -D -h localhost -U xiaop(用户名) mydb(数据库名称) > mydb.bak

通过上面的命令就会创建一个名为 mydb.bak的文件,文件中记录了用于恢复数据库的SQL命令。

正如您所见,pg_dump 把结果输出到标准输出。 我们下面就可以看到这样做有什么好处。

pg_dump 是一个普通的 PostgreSQL 客户端应用(尽管是个相当聪明的东西。)这就意味着您可以从任何可以访问该数据库的远端主机上面进行备份工作。 但是请记住 pg_dump 不会以任何特殊权限运行。具体说来, 就是它必须要有您想备份的表的读权限,因此,实际上您几乎总是要成为数据库超级用户。

要声明 pg_dump 应该以哪个用户身份进行联接,使用命令行选项 -h host 和 -p port。缺省主机是本地主机或您的环境变量PGHOST声明的值。类似,缺省端口是环境变量PGPORT或(如果它不存在的话)编译好了的缺省值。(服务器通常有相同的缺省,所以还算方便。)

和任何其他 PostgreSQL 客户端应用一样, pg_dump 缺省时用与当前操作系统用户名同名的数据库用户名进行联接。要覆盖这个名字,要么声明 -U 选项, 要么设置环境变量PGUSER。 请注意 pg_dump 的联接也和普通客户应用一样要通过客户认证机制。

由 pg_dump 创建的备份在内部是一致的, 也就是说,在pg_dump运行的时候对数据库的更新将不会被转储。 pg_dump 工作的时候并不阻塞其他的对数据库的操作。 (但是会阻塞那些需要排它锁的操作,比如 VACUUM FULL。)

注:: 如果您的数据库结构依赖于 OID (比如说用做外键),那么您必须告诉 pg_dump 把 OID 也倒出来。 要倒 OID,可以使用 -o 命令行选项。 缺省时也不会转储"大对象"。如果您使用大对象,请参考 pg_dump 的命令手册页。


2.2 pg_dumpall;

如果您希望对整个系统中所有的数据库进行备份的话(而不是只对某一个数据库进行备份),您可以使用命令pg_dumpall 而不是pg_dump。执行这个命令可以对PostgreSQL 所能识别的所有的数据库(包括其自身的系统数据库)备份到一个文件中。下面给出了一个使用实例:

xiaop@xiaop-laptop:~$ /usr/lib/postgresql/8.2/bin/pg_dumpall -D -h localhost -U xiaop(用户名) > all.bak

这样就会将localhost的所有数据库备份到all.bak文件中了;


2.3 计划任务;

为了保证您的备份时刻保持更新,您可以通过往cron table中加入pg_dump或者是pg_dumpall命令来定期执行备份工作。这里给出了两个cron entries的例子。第一个是在每天凌晨3点对test数据库进行备份,而第二个是在每个星期五的晚上9点对所有的数据库进行备份:

xiaop@xiaop-laptop:~$ 0 3 * * * /usr/lib/postgresql/8.2/bin/pg_dump -D -h localhost -U xiaop(用户名) mydb(数据库名称) > /home/xiaop/mydb.bak0 21 * *
xiaop@xiaop-laptop:~$ 5 /usr/lib/postgresql/8.2/bin/pg_dumpall -D -h localhost -U xiaop(用户名) > /home/xiaop/all.bak


3. 从转储中恢复


3.1 用pg_dump恢复;

从备份中恢复数据的工作比执行备份甚至更简单——您所要做的就是通过执行备份文件中的SQL命令来对数据库进行恢复。如果您是使用pg_dump对某一个数据库进行了备份,那么备份中就会有CREATE TABLE 的语句来对源表进行复制。当然,您首先要新创建一个空数据库来存放这些数据表。您可以使用createdb 这个工具来完成这一步工作,这个工具也是PostgreSQL 套件中的一部分:
xiaop@xiaop-laptop:~$ /usr/lib/postgresql/8.2/bin/createdb mydb(数据库名称)

现在您就可以执行备份文件中的SQL命令来对数据库进行恢复了, pg_dump 生成的文本文件可以由 psql 程序读取。 从转储中恢复的常用命令格式是:

psql dbname < infile

如下例所示:

xiaop@xiaop-laptop:~$ /usr/lib/postgresql/8.2/bin/psql -h localhost -U xiaop(用户名) -d mydb(数据库名称) < mydb.bak


3.2 用pg_dumpall恢复;

如果您是使用pg_dumpall对所有的数据库进行备份的,就没有必要先新建一个数据库,因为备份文件中已经包含了完成CREATE DATABASE工作的相关的调用。在这里,只需要在psql命令行客户端中输入对应的备份文件就可以了,而不需要指定目标数据库:

xiaop@xiaop-laptop:~$ /usr/lib/postgresql/8.2/bin/psql -h localhost -U xiaop(用户名 ) < all.bak

一旦数据恢复完成后,您就可以登录到服务器并查看到已恢复的数据。


3.3 ANALYZE;

一旦完成恢复,在每个数据库上运行 ANALYZE 是明智的举动, 这样优化器就有有用的统计数据了。您总是可以运行 vacuumdb -a -z 来 VACUUM ANALYZE 所有数据库;这个等效于手工运行 VACUUM ANALYZE;


4. 处理大数据库;


4.1 输出大数据库;

因为 PostgreSQL 允许表的大小大于您的系统允许的最大文件大小, 可能把表转储到一个文件会有问题,因为生成的文件很可能比您的系统允许的最大文件大。 因为 pg_dump 输出到标准输出,您可以用标准的 Unix 工具绕开这个问题:
使用压缩的转储. 使用您熟悉的压缩程序,比如说 gzip。

xiaop@xiaop-laptop:~$ pg_dump mydb(数据库名) | gzip > mydbBACK.gz


4.2 恢复大数据库;

用下面命令恢复:
xiaop@xiaop-laptop:~$ createdb mydbNEW(新数据库名)
xiaop@xiaop-laptop:~$ gunzip -c mydbBACK.gz | psql mydbNEW

或者
xiaop@xiaop-laptop:~$ cat mydbBACK.gz | gunzip | psql mydbNEW


4.3 使用 split;


4.3.1 分割;

split 命令允许您用下面的方法把输出分解成操作系统可以接受的大小。 有关split的用法可以在《文件的切分split和结合工具cat 介绍》中查询。比如,让每个块大小为 1 兆字节:
xiaop@xiaop-laptop:~$ pg_dump dbname | split -b 1m - filename


4.3.2 合并;

分割后可以用下面的命令恢复:
xiaop@xiaop-laptop:~$createdb dbname
xiaop@xiaop-laptop:~$cat filename* | psql dbname


5. 关于本文;

有关PostgreSQl数据库备份和恢复的另外两个方法“文件系统级别的备份”和“在线备份”,我们以后再讨论,本文大部分资料都是参照中文文档,目的是让兄弟们查找方便一些,详细的东西在中文文档都有,多谢各位弟兄们指点 :)

 

 

 

 

分享到:
评论

相关推荐

    数据库备份和文件夹备份

    - 执行备份:使用数据库管理系统(如MySQL, PostgreSQL, Oracle, SQL Server等)提供的工具或第三方软件执行备份操作。 - 验证备份:定期检查备份文件的完整性和可恢复性,确保备份有效。 - 存储和管理备份:备份应...

    postgresql 8 for suse 11

    - 可以使用`pg_dump`和`pg_restore`工具进行数据库的完整备份和恢复。 - 也可以通过流复制实现高可用性和灾难恢复。 8. **扩展与集成**: - PostgreSQL 8.3支持PL/pgSQL、Perl、Python、TCL等编程语言编写存储...

    pg_dump-to-s3:自动将PostgreSQL备份转储并存档到Amazon S3

    - 在生产环境中,应考虑备份策略,如全量备份与增量备份的结合,以平衡资源消耗和恢复速度。 - 了解并遵循AWS的费用结构,避免不必要的成本开支。 - 定期测试恢复过程,确保备份的完整性。 综上所述,`pg_dump-to-...

    mssql-to-pgsql:将表内容从Microsoft SQL Server数据库复制到PostgreSQL数据库

    - 数据转换:可能需要处理数据类型不匹配的问题,因为SQL Server和PostgreSQL的数据类型不尽相同,例如,SQL Server的NVARCHAR对应PostgreSQL的VARCHAR。 - 创建目标表:在PostgreSQL中创建与源表结构相同的表,...

    PostgreSQL中的备份表(不是数据库)

    1. **PostgreSQL备份概述**: - PostgreSQL是开源的对象关系型数据库系统,支持多种操作系统,包括Windows。 - 数据库备份是防止数据丢失的重要步骤,它可以通过复制数据库或其部分(如表)到安全存储来实现。 2....

    Greenplum使用pg_dump备份数据库1

    本文将详细讲解如何使用`pg_dump`工具来备份和恢复Greenplum数据库。 ### 1. `pg_dump`工具介绍 `pg_dump`是PostgreSQL数据库系统提供的一个实用程序,用于创建数据库的转储(或备份)。在Greenplum中,这个工具...

    转储postgis数据库方法.docx

    1. **权限问题**:确保使用的用户名具有足够的权限来进行转储和恢复操作。 2. **数据一致性**:在进行数据库恢复时,确保目标数据库为空或与原始数据保持一致。 3. **文件路径**:确保提供的文件路径是正确的,并且...

    1.5-PostgreSQL对象-关系数据库系统软件.ppt

    管理工具方面,PostgreSQL提供了`psql`命令行工具,它是一个强大的交互式环境,允许用户直接输入SQL命令进行查询和管理。除此之外,`pgAdmin`是一个广泛使用的图形用户界面(GUI)工具,提供了一种直观的方式来管理...

    将你的网站从MySQL改为PostgreSQL

    1. 数据备份:首先,使用`mysqldump`工具创建MySQL数据库的SQL转储文件。 2. 数据转换:由于MySQL和PostgreSQL的SQL语法略有不同,不能直接使用MySQL的dump文件。需要手动或自动化工具修改SQL语句,使其符合...

    postgres 命令

    【postgres 命令】是 PostgreSQL 数据库管理系统中的一系列...在使用这些命令时,应根据具体需求选择合适的选项,确保备份和恢复操作的安全性和效率。同时,了解和熟练掌握这些命令是 PostgreSQL 管理员的基本技能。

    Laravel开发-laravel-backup

    这个包提供了一套完整的解决方案,包括数据库备份、文件系统备份以及备份的存储、监控和恢复功能。让我们深入了解一下`laravel-backup`及其在Laravel开发中的应用。 1. **安装与配置** 要在Laravel项目中使用`...

    为不同后端(文件、mongoDB、mysql、postgres等)创建恢复简单、增量和加密的备份_Go_Makefile.zip

    MySQL和PostgreSQL的备份通常涉及生成SQL转储文件,然后在Go程序中读取和存储这些文件。 4. **加密备份**: 为了保护备份数据的安全性,我们可以使用Go的加密库,如`crypto/aes`和`crypto/cipher`,对备份文件进行...

    Navicat_12_PDF_Win.pdf

    - **转储和运行SQL文件** 支持从SQL文件中导入或导出数据。 #### 第十一章:自动运行 - **关于自动运行** 自动运行功能允许用户创建批处理作业,并对其进行调度,实现自动化任务执行。 - **创建批处理作业** ...

    postgresql_dumps

    在数据库管理领域,PostgreSQL 是一款强大的开源关系型数据库管理系统,它提供了多种方式进行数据的备份和恢复,其中转储(dumps)是常用的一种方式。转储允许用户将数据库的数据和结构完整地保存到文件中,以便于...

    将postgres数据导入到sqlite

    这通常包括一个可以读取和操作SQL语句的工具,例如pg_dump用于导出PostgreSQL的数据,以及sqlite3命令行工具或相应的GUI工具来导入SQLite。此外,可能还需要一个转换脚本或程序,如"Postgres2Sqlite",这个工具能够...

    docker中psql数据库备份与恢复详解

    本文将针对Docker环境下psql数据库的备份和恢复操作进行详解。 备份psql数据库是数据库运维和管理中的常规任务。当需要迁移到新环境、系统升级或灾难恢复时,备份显得尤为重要。备份可以是完全备份,即备份整个...

    瀚高数据库V5管理手册V4.0.pdf

    - **2.3 备份和恢复** - **2.3.1 SQL转储**:如何使用SQL命令进行数据备份。 - **2.3.2 文件系统级别的备份**:直接在文件系统层面进行备份。 - **2.3.3 连续归档和时间点恢复(PITR)** - **建立WAL归档**:设置...

Global site tag (gtag.js) - Google Analytics