opengauss WAL日志测试 · Pull Request !888 · openGauss/blog

WAL日志

预写式日志WAL（Write Ahead Log，也称为Xlog）是实现事务日志的标准方法，对数据文件（表和索引的载体）持久化修改之前必须先持久化相应的日志。如果要修改数据文件，必须是在这些修改操作已经记录到日志文件之后才能进行修改，即在描述这些变化的日志记录刷新到永久存储器之后。在系统崩溃时，可以使用WAL日志对openGauss进行恢复操作。
日志文件存储路径
以一个数据库节点为例，默认在“/gaussdb/data/data_dn/pg_xlog”目录下。
其中“/gaussdb/data/data_dn”代表openGauss节点的数据目录。日志文件命名格式
日志文件以段文件的形式存储的，每个段为16MB，并分割成若干页，每页8KB。对WAL日志的命名说明如下：一个段文件的名称由24个十六进制组成，分为三个部分，每个部分由8个十六进制字符组成。第一部分表示时间线，第二部分表示日志文件标号，第三部分表示日志文件的段标号。时间线由1开始，日志文件标号和日志文件的段标号由0开始。
例如，系统中的第一个事务日志文件是000000010000000000000000。
 说明： 这些数字一般情况下是顺序增长使用的（要把所有可用数字都用光也需要非常长的时间），但也存在循环使用的情况。
日志内容说明

WAL日志的内容取决于记录事务的类型，在系统崩溃时可以利用WAL日志进行恢复。
默认配置下，openGauss每次启动时会先读取WAL日志进行恢复。
维护建议

WAL日志对数据库异常恢复有重要的作用，建议定期对WAL日志进行备份。
实验环境中的wal日志位置在
/opt/software/openGauss/data/single_node/pg_xlog
[omm@db1 pg_xlog]$ 
[omm@db1 pg_xlog]$ 
[omm@db1 pg_xlog]$ ls -lrt
总用量 32768
drwx------ 2 omm dbgroup        6 8月  16 07:18 archive_status
-rw------- 1 omm dbgroup 16777216 8月  16 07:18 000000010000000000000001
-rw------- 1 omm dbgroup 16777216 8月  21 16:14 000000010000000000000002

WAL日志的查询
openGauss=# select  pg_current_xlog_location();
 pg_current_xlog_location 
--------------------------
 0/3913DD0
(1 row)

openGauss=#

WAL日志的管理

配置审计文件占用磁盘空间的大小（audit_space_limit），查看已配置的参数。

postgres=# SHOW audit_space_limit;

audit_space_limit
-------------------
1GB
(1 row)

1、WAL 日志并不是一直保存，否则会占用大量的磁盘空间。 wal_keep_segments参数控制wal日志保留的个数，默认保留最近16个。 因此生产环境为了数据库恢复，需要开启归档模式，定时将WAL 日志复制到归档目录。

查看当前状态
[root@db1 ~]$ gsql -d postgres -p 15400
Password: 
gsql ((openGauss 3.0.3 build 46134f73) compiled at 2023-01-10 22:42:07 commit 0 last mr  )
Non-SSL connection (SSL connection is recommended when requiring high-security)
Type "help" for help.

openGauss=# show data_directory;
         data_directory          
---------------------------------
 /data/openGauss/install/data/single_node
(1 row)

wopenGauss=# show archive_mode;
 archive_mode 
--------------
 off
(1 row)

openGauss=#

2、启用归档模式
修改opengauss配置文件中的如下3个参数：

openGauss=# alter system set archive_mode='on';
ALTER SYSTEM SET

openGauss=# alter system set wal_level='hot_standby';
NOTICE:  please restart the database for the POSTMASTER level parameter to take effect.
ALTER SYSTEM SET

openGauss=# alter system set archive_command='cp %p /data/openGauss/install/data/single_node/archivelog/%f';
ALTER SYSTEM SET
重启openGauss，让参数修改生效。

[[root@db1 ~]$ gs_om -t restart

开启归档后在归档路径下的archive_status目录里，会有一个类似xxx.ready和xxx.done的文件。

[[root@db1 ~]$ pwd
/data/openGauss/install/data/single_node/pg_xlog/archive_status

.ready表示WAL已经写满，可以调用归档命令了。
.done表示已归档完成。

3、 WAL 日志删除
我们先查看参数：wal_keep_segments

opengauss=# select name, setting,source from pg_settings where name like '%wal%';

默认配置下，WAL 会保留16个wal 日志，在开启归档后，在wal转归档完成后，也会删除wal日志。

openGauss=# show archive_command;
                   archive_command                   
-----------------------------------------------------
 cp %p /data/openGauss/install/data/single_node/archivelog/%f
(1 row)

4、pg_archivecleanup是一个用于清理旧的归档日志的工具。

删除比000000010000000000000010更早的日志
pg_archivecleanup [OPTION]... ARCHIVELOCATION OLDESTKEPTWALFILE
备机恢复时，在recovery.conf里配置archive_cleanup_command参数。
archive_cleanup_command = 'pg_archivecleanup /mnt/server/archiverdir %r'
恢复完成后从归档目录中清除不再需要的文件。

openGauss/blog .gitee-modal { width: 500px !important; }

搜索帮助

openGauss/blog