BE磁盘坏了数据还在不在？——Doris数据备份恢复和容灾方案

在某元宇宙社交公司，有一次凌晨3点BE-2的一块SSD报了坏扇区告警。当时心里一紧：上面有好几张核心表的Tablet副本。好在我们配了3副本，即使BE-2下线，其他两个BE上还有完整的数据副本，查询不受影响。但这次事件让我开始重视备份——如果3个BE的同一个Tablet全挂了呢？如果有人误删了表呢？这些极端场景必须有预案。

第一层保护：多副本机制

-- 查看表的副本数
SHOW CREATE TABLE dwd_user_event;
-- 找 replication_num = 3
 
-- 建表时指定副本数
CREATE TABLE dwd_user_event (
    event_time DATETIME,
    user_id BIGINT,
    event_name VARCHAR(128)
) DUPLICATE KEY(event_time, user_id)
DISTRIBUTED BY HASH(user_id) BUCKETS 16
PROPERTIES ('replication_num' = '3');
 
-- 副本数设置建议：
-- 3副本：生产环境标配（任意1个BE故障不影响服务）
-- 2副本：测试环境或成本敏感场景
-- 1副本：开发环境（BE挂了数据就丢了）
 
-- 查看哪些Tablet有副本缺失
ADMIN SHOW REPLICA STATUS FROM dwd_user_event;

第二层保护：Backup/Restore——定期备份

-- 创建仓库（指向S3/HDFS存储位置）
CREATE REPOSITORY backup_repo
WITH S3
ON LOCATION 's3://my-bucket/doris-backup'
PROPERTIES (
    'AWS_ENDPOINT' = 's3.us-west-2.amazonaws.com',
    'AWS_ACCESS_KEY' = 'xxx',
    'AWS_SECRET_KEY' = 'xxx'
);
 
-- 执行备份（按数据库或按表）
BACKUP SNAPSHOT mydb.snapshot_20240115
TO backup_repo
ON (dwd_user_event, dim_user, dws_daily_overview);
 
-- 查看备份状态
SHOW BACKUP FROM mydb;
 
-- 恢复（误删后的救命操作）
RESTORE SNAPSHOT mydb.snapshot_20240115
FROM backup_repo
ON (dwd_user_event)
PROPERTIES ('replication_num' = '3');