企业官网建设流程全解析

一、DM数据库本地归档概述

1.1 什么是DM本地归档

达梦数据库(DM)的本地归档是指将数据库的重做日志(redo log)自动复制到本地的指定目录中保存的过程。这些归档日志记录了数据库的所有变更操作，是数据库恢复和容灾的重要数据源。与实时备份不同，本地归档是在日志切换时自动将已满的重做日志文件转换为归档日志文件并存放在指定位置。

1.2 DM本地归档的主要优势

1. 数据安全性提升：本地归档为数据库提供了额外的数据安全保障，即使在数据库文件损坏的情况下，也能通过归档日志恢复数据。
2. 恢复能力增强：结合归档日志和备份文件，可以实现时间点恢复(point-in-time recovery)，恢复到任意指定的时间点。
3. 管理简化：通过自动化归档过程，减少人工干预，降低管理成本。
4. 性能优化：合理配置归档可以平衡I/O负载，提高数据库整体性能。
5. 合规性支持：满足各种行业合规性要求，对数据保留和审计提供支持。

1.3 DM本地归档的应用场景

1. 关键业务系统：为金融、电信等关键业务系统提供高可用性和数据安全保障。
2. 数据迁移：在数据库迁移过程中，通过归档日志确保数据一致性。
3. 灾难恢复：作为本地灾备方案的重要组成部分，快速恢复业务系统。
4. 开发测试环境：为开发测试环境提供数据恢复和场景重现能力。
5. 审计与追溯：满足数据追溯和审计需求，支持问题排查和分析。

二、DM本地归档的配置与实施

2.1 前置准备工作

在配置DM本地归档之前，需要完成以下准备工作：

1. 确保有足够的磁盘空间：归档日志会持续增长，需要预留足够的存储空间。
2. 检查数据库运行状态：确保数据库实例正常运行，没有其他配置冲突。
3. 准备专用目录：为归档日志创建专用目录，避免与其他文件混存。
4. 确认操作系统权限：确保DM数据库服务账号有足够的权限操作归档目录。
5. 检查日志组配置：确认日志组配置合理，满足归档需求。

2.2 本地归档参数配置

本地归档的核心参数配置如下：

-- 检查当前归档配置 SELECT SF_GET_ARCHIVE_CONFIG(); -- 设置归档类型为本地归档 SP_SET_PARA_VALUE(1, 'ARCH_TYPE', 1); -- 设置归档目录路径 SP_SET_PARA_VALUE(1, 'ARCH_DIR', '/dmdata/arch'); -- 设置归档文件命名格式 SP_SET_PARA_VALUE(1, 'ARCH_FILE_NAME', 'ARCH_%T_%S_%R.log'); -- 设置归档文件大小限制(单位：MB) SP_SET_PARA_VALUE(1, 'ARCH_FILE_SIZE', 1024); -- 设置归档模式 SP_SET_PARA_VALUE(1, 'ARCH_MODE', 1); -- 保存配置 SP_SET_PARA_VALUE(1, 'ARCH_INI', 1);

2.3 创建归档目录

创建归档目录的步骤如下：

1. 以root或管理员身份登录服务器：

su - root

1. 创建归档目录：

mkdir -p /dmdata/arch chown -R dmmdb:dmmdb /dmdata/arch chmod -R 750 /dmdata/arch

1. 确认目录权限和所有权：

ls -ld /dmdata/arch

2.4 启动本地归档功能

启动本地归档功能的流程图如下：

启动归档的具体SQL命令：

-- 检查当前归档状态 SELECT * FROM V$ARCHIVE_STATUS; -- 启用归档模式 ALTER DATABASE ARCHIVELOG; -- 强制日志切换，生成第一个归档文件 ALTER SYSTEM SWITCH LOGFILE; -- 确认归档状态 SELECT * FROM V$ARCHIVE_STATUS;

2.5 验证归档功能是否正常

验证归档功能的步骤如下：

1. 检查归档目录中的文件：

ls -l /dmdata/arch

1. 查询归档状态：

SELECT * FROM V$ARCHIVE_STATUS;

1. 执行日志切换并检查新的归档文件生成：

ALTER SYSTEM SWITCH LOGFILE; -- 等待几秒后检查 SELECT * FROM V$ARCHIVE_STATUS;

1. 检查归档进程状态：

SELECT * FROM V$ARCHIVE_PROCESS;

1. 查看归档错误日志：

SELECT * FROM V$ARCHIVE_LOG WHERE STATUS = 'ERROR';

三、DM本地归档的管理与维护

3.1 归档日志管理

归档日志的管理包括以下内容：

1. 归档日志清理策略：

-- 设置自动清理归档日志的保留天数 SP_SET_PARA_VALUE(1, 'ARCH_RETENTION_DAYS', 7); -- 手动清理过期的归档日志 RM /dmdata/arch/ARCH_20230501*.log

1. 归档日志备份：

# 创建备份脚本 cat > backup_arch.sh <<EOF #!/bin/bash DATE=\$(date +%Y%m%d) BACKUP_DIR=/backup/dm_arch/\$DATE mkdir -p \$BACKUP_DIR cp /dmdata/arch/*.log \$BACKUP_DIR tar -czf \$BACKUP_DIR.tar.gz \$BACKUP_DIR rm -rf \$BACKUP_DIR EOF # 设置定时任务执行备份 crontab -e # 添加以下行 0 2 * * * /path/to/backup_arch.sh

1. 归档日志监控：

-- 查看归档日志统计信息 SELECT * FROM V$ARCHIVE_STAT; -- 监控归档目录使用情况 SELECT FILENAME, SPACE_USED, SPACE_LIMIT FROM V$ARCHIVE_SPACE;

3.2 归档空间监控

归档空间监控的关键指标和工具：

1. 磁盘空间监控：

# 监控归档目录磁盘使用情况 df -h /dmdata/arch # 设置告警阈值，当使用超过80%时发出警告 THRESHOLD=80 USAGE=\$(df /dmdata/arch | awk '/[0-9]/{print \$5}' | sed 's/%//') if [ \$USAGE -gt \$THRESHOLD ]; then echo "归档目录空间使用率超过\$THRESHOLD%" fi

1. 归档日志增长监控：

-- 查看最近24小时的归档日志增长率 SELECT COUNT(*) AS ARCH_COUNT, SUM(BLOCK_SIZE*BLOCK_COUNT) AS TOTAL_SIZE FROM V$ARCHIVE_LOG WHERE FIRST_TIME >= SYSDATE - 1;

1. 空间清理计划：

-- 设置归档日志自动清理策略 SP_SET_PARA_VALUE(1, 'ARCH_AUTO_CLEAN', 1); SP_SET_PARA_VALUE(1, 'ARCH_CLEAN_INTERVAL', 24); -- 清理间隔(小时)

3.3 归档故障处理

常见的归档故障及解决方案：

1. 归档目录空间不足：

-- 检查归档目录使用情况 SELECT FILENAME, SPACE_USED, SPACE_LIMIT FROM V$ARCHIVE_SPACE; -- 清理旧的归档日志 RM /dmdata/arch/ARCH_20230*.log -- 扩展归档目录空间 # 例如：新增磁盘并挂载到归档目录

1. 归档进程失败：

-- 检查归档进程状态 SELECT * FROM V$ARCHIVE_PROCESS; -- 重启归档进程 ALTER SYSTEM ARCHIVE LOG START; -- 如果是配置问题，修正参数后重启数据库

1. 权限问题：

# 修复归档目录权限 chown -R dmmdb:dmmdb /dmdata/arch chmod -R 750 /dmdata/arch

1. 磁盘I/O问题：

# 检查磁盘I/O状态 iostat -x 1 5 # 可能需要优化归档配置，如调整归档文件大小 SP_SET_PARA_VALUE(1, 'ARCH_FILE_SIZE', 512);

3.4 归档性能优化

归档性能优化的主要措施：

1. 归档文件大小调整：

-- 根据系统I/O能力调整归档文件大小 SP_SET_PARA_VALUE(1, 'ARCH_FILE_SIZE', 2048); -- 单位：MB

1. 归档目录分散：

# 创建多个归档目录 mkdir -p /dmdata/arch1 mkdir -p /dmdata/arch2 # 在参数中配置多个归档目录 SP_SET_PARA_VALUE(1, 'ARCH_DIR1', '/dmdata/arch1'); SP_SET_PARA_VALUE(1, 'ARCH_DIR2', '/dmdata/arch2');

1. I/O调度优化：

# 调整文件系统挂载参数 echo "noatime,nodiratime" >> /etc/fstab mount -o remount /dmdata

1. 归档日志缓冲区优化：

-- 调整归档相关缓存大小 SP_SET_PARA_VALUE(1, 'ARCH_BUFF_SIZE', 128); -- 单位：MB SP_SET_PARA_VALUE(1, 'ARCH_IO_BUFF_SIZE', 64); -- 单位：MB

四、DM本地归档的高级应用

4.1 结合RMAN进行备份

RMAN(Recovery Manager)是DM数据库提供的高效备份工具，结合归档日志可以实现更强大的备份恢复功能：

1. RMAN基础配置：

-- 连接到RMAN RMAN TARGET / -- 配置默认归档目录 CONFIGURE ARCHIVELOG DESTINATION TO '/dmdata/arch'; -- 配置备份保留策略 CONFIGURE RETENTION POLICY TO RECOVERY WINDOW OF 7 DAYS;

1. 创建完整备份：

-- 创建数据库完整备份 BACKUP DATABASE FULL; -- 创建表空间备份 BACKUP TABLESPACE USERS, SYSTEM; -- 创建归档日志备份 BACKUP ARCHIVELOG ALL;

1. 增量备份策略：

-- 配置增量备份级别 CONFIGURE INCREMENTAL BACKUP FOR LEVEL 1; -- 执行增量备份 BACKUP INCREMENTAL DATABASE LEVEL 1;

1. 验证备份完整性：

-- 验证备份集 LIST BACKUP SUMMARY; -- 校验备份文件 BACKUP VALIDATE DATABASE FULL;

4.2 归档日志的恢复应用

利用归档日志进行数据库恢复是DM本地归档的重要应用场景：

1. 完全恢复过程：

-- 1. 恢复数据库到最近的完整备份点 RESTORE DATABASE FROM BACKUP '/backup/full_backup.bak'; -- 2. 应用归档日志进行恢复 RECOVER DATABASE USING ARCHIVELOG '/dmdata/arch'; -- 3. 打开数据库 ALTER DATABASE OPEN;

1. 时间点恢复：

-- 恢复到特定时间点 RECOVER DATABASE UNTIL TIME '2023-05-01 12:00:00' USING ARCHIVELOG; -- 打开数据库 ALTER DATABASE OPEN RESETLOGS;

1. 事务恢复：

-- 恢复特定事务 RECOVER DATABASE UNTIL CANCEL USING ARCHIVELOG; -- 确认恢复完成 ALTER DATABASE OPEN RESETLOGS;

1. 归档日志应用验证：

-- 验证归档日志应用情况 SELECT * FROM V$RECOVER_LOG;

4.3 跨平台归档迁移

在不同平台间迁移DM数据库时，归档日志的处理策略：

1. 归档日志采集：

# 在源服务器上打包归档日志 tar -czf arch_transfer_20230501.tar.gz /dmdata/arch/ARCH_20230501*.log # 通过安全通道传输到目标服务器 scp arch_transfer_20230501.tar.gz target_server:/tmp

1. 归档日志重组：

-- 在目标服务器上重组归档日志 ALTER DATABASE RECOVER USING ARCHIVELOG '/tmp/arch_transfer_20230501.tar.gz';

1. 平台差异处理：

-- 处理平台差异，如路径差异 SP_SET_PARA_VALUE(1, 'ARCH_DIR', '/new_dmdata/arch'); -- 重启归档进程 ALTER SYSTEM ARCHIVE LOG START;

1. 验证迁移结果：

-- 检查归档日志是否完整 SELECT * FROM V$ARCHIVED_LOG WHERE DEST_ID = 1; -- 验证数据库一致性 SELECT * FROM V$DATABASE;

4.4 归档日志的归档策略优化

针对不同业务场景的归档日志优化策略：

1. 按重要性分级归档：

-- 为重要表空间配置高级别归档 SP_SET_PARA_VALUE(1, 'ARCH_PRIORITY', 2); -- 为一般表空间配置默认归档级别 SP_SET_PARA_VALUE(1, 'ARCH_PRIORITY', 1);

1. 按时间周期归档：

-- 配置按时间自动归档 SP_SET_PARA_VALUE(1, 'ARCH_TIME_INTERVAL', 60); -- 单位：分钟 -- 设置归档文件保留时间 SP_SET_PARA_VALUE(1, 'ARCH_RETENTION_DAYS', 30);

1. 压缩归档策略：

-- 启用归档日志压缩 SP_SET_PARA_VALUE(1, 'ARCH_COMPRESS', 1); -- 配置压缩级别 SP_SET_PARA_VALUE(1, 'ARCH_COMPRESS_LEVEL', 6);

1. 多级归档存储：

-- 配置多级归档存储策略 SP_SET_PARA_VALUE(1, 'ARCH_DIR_LEVEL1', '/fast_storage/arch'); SP_SET_PARA_VALUE(1, 'ARCH_DIR_LEVEL2', '/slow_storage/arch'); SP_SET_PARA_VALUE(1, 'ARCH_DIR_LEVEL3', '/tape_storage/arch');

1. 归档监控与预警：

-- 设置归档监控脚本 cat > monitor_arch.sh <<EOF #!/bin/bash ARCH_COUNT=\$(ls /dmdata/arch/*.log 2>/dev/null | wc -l) THRESHOLD=1000 if [ \$ARCH_COUNT -gt \$THRESHOLD ]; then echo "Warning: Archive count exceeds threshold (\$ARCH_COUNT > \$THRESHOLD)" # 发送告警邮件或短信 echo "Archive count: \$ARCH_COUNT" | mail -s "Archive Alert" dba@example.com fi EOF # 添加定时任务 crontab -e # 每小时执行一次监控 0 * * * * /path/to/monitor_arch.sh