GBase 8a数据库在线备份技术原理之库级全备流程解析
南大通用GBase 8a(gbase database)数据库在线备份技术原理:
库级全备流程
关键技术：
- 写时复制技术是保障在线备份不阻塞 DDL/DML 和数据一致性的关键技术。
- 开启写时复制后，当用户在备份状态的表上执行的 DDL/DML 时，系统首先复制表的元数据和尾块数据，然后再执行 DDL/DML 命令。
- 特殊的，如果是 DROP 表操作，系统在 DROP 表之前，不仅复制表的元数据，还需要移走该表的数据文件，然后在执行表的 DROP 操作。
流程：
- 开始库级备份
- 加库的读锁，避免备份期间库被删除
- 启动写时复制，备份期间不阻塞 DDL/DML
- 准备备份清单，获取库下所有表的列表
- 划分备份批次，由于库下的所有表可能会比较多，备份的时候会划分备份批次，一批次一批次的进行备份操作
- 获取一批次需要备份的表
- 每张表设置备份状态
- 执行表的元数据和数据备份，如果备份失败，会将失败的表写入失败列表中去，以便后续再进行尝试
- 完成备份后，将表设置为正常状态
- 重试失败列表中的表，尝试完成备份，重试 3 次，如还未完成，将记录为失败的表
- 重试完成后，设置表为正常状态
- 关闭写时复制
- 释放库的读锁
- 结束库级备份，生成一个库级备份的备份点
全量备份按照以下顺序备份所需要的文件：
- 库级备份的备份清单
- 库的元数据信息和表的元数据信息
- 表的数据文件
- 备份任务下发到每个备份节点，按照每个节点为单位进行备份
- 每个 gcluster 节点负责备份本节点的库/表元数据，将备份文件上传到远端存储系统中（或本地）
- 每个 gnode 节点负责备份本节点的元数据及表的数据文件，将备份文件上传到远端存储系统中（或本地）
- 备份点信息，包括备份周期、备份点、备份时间以及备份成功与失败的表列表信息。