Redis的两种持久化机制

1、持久化机制

client—>redis(内存)—>内存数据-数据持久化—>磁盘

两种方法

快照（Snapshot）
AOF（Append Only File）只追加日志文件

2、快照

2.1 特点

这种方式可以将某一时刻的所有数据写入到硬盘中，这也是 redis的默认开启持久化方式，保存的文件是以.rdb结尾的文件，因此这种方式也被称为RDB方式。官方的说法叫快照持久化。

2.2 快照生成方式

客户端方式：BGSAVE和SAVE指令
服务器配置自动触发

&#x5BA2;&#x6237;&#x7AEF;&#x65B9;&#x5F0F;1&#xFF1A;BGSAVE
&#x5BA2;&#x6237;&#x7AEF;&#x53EF;&#x4EE5;&#x4F7F;&#x7528;BGSAVE&#x547D;&#x4EE4;&#x6765;&#x521B;&#x5EFA;&#x4E00;&#x4E2A;&#x5FEB;&#x7167;&#xFF0C;&#x5F53;&#x63A5;&#x6536;&#x5230;&#x5BA2;&#x6237;&#x7AEF;&#x7684;&#x8FD9;&#x4E2A;&#x547D;&#x4EE4;&#x540E;&#xFF0C;redis&#x4F1A;&#x8C03;&#x7528;fork&#x64CD;&#x4F5C;&#x6765;&#x521B;&#x5EFA;&#x4E00;&#x4E2A;&#x5B50;&#x8FDB;&#x7A0B;&#xFF0C;&#x7136;&#x540E;&#x5B50;&#x8FDB;&#x7A0B;&#x8D1F;&#x8D23;&#x628A;&#x8FD9;&#x4E2A;&#x5FEB;&#x7167;&#x5199;&#x5165;&#x5230;&#x78C1;&#x76D8;&#x4E2D;&#xFF0C;&#x800C;&#x7236;&#x8FDB;&#x7A0B;&#x7EE7;&#x7EED;&#x5904;&#x7406;&#x547D;&#x4EE4;&#x8BF7;&#x6C42;

&#x4EC0;&#x4E48;&#x662F;fork&#xFF1A;fork&#x662F;linux&#x7CFB;&#x7EDF;&#x7684;&#x8C03;&#x7528;&#xFF1A;&#x5728;&#x5F53;&#x524D;&#x8FDB;&#x7A0B;&#x4E2D;&#xFF0C;fork&#x4E00;&#x4E2A;&#x5B50;&#x8FDB;&#x7A0B;&#xFF0C;&#x5B50;&#x8FDB;&#x7A0B;&#x6700;&#x521D;&#x4E0E;&#x4E3B;&#x8FDB;&#x7A0B;&#x662F;&#x5171;&#x4EAB;&#x4E00;&#x4EFD;&#x5185;&#x5B58;&#x533A;&#x57DF;&#x7684;&#x3002;&#x7531;&#x4E8E;&#x4E3B;&#x8FDB;&#x7A0B;&#x4E0D;&#x65AD;&#x8FDB;&#x884C;&#x6570;&#x636E;&#x7684;&#x5199;&#x64CD;&#x4F5C;&#xFF0C;&#x4E0E;&#x5B50;&#x8FDB;&#x7A0B;&#x5B58;&#x5728;&#x5E76;&#x53D1;&#x51B2;&#x7A81;&#x95EE;&#x9898;&#x3002;&#x6B64;&#x65F6;&#xFF0C;redis&#x91C7;&#x7528;&#x5199;&#x65F6;&#x590D;&#x5236;&#x6280;&#x672F;&#xFF08;cow&#xFF09;&#xFF1A;
&#x5F53;&#x4E3B;&#x8FDB;&#x7A0B;&#x5199;&#x64CD;&#x4F5C;&#x65F6;&#xFF0C;&#x9996;&#x5148;&#x4F1A;&#x590D;&#x5236;&#x4E00;&#x4EFD;&#x5C06;&#x8981;&#x6D89;&#x53CA;&#x5199;&#x64CD;&#x4F5C;&#x7684;&#x5185;&#x5B58;&#x9875;&#x3002;&#x7136;&#x540E;&#x4E3B;&#x8FDB;&#x7A0B;&#x5728;&#x65B0;&#x590D;&#x5236;&#x7684;&#x5185;&#x5B58;&#x9875;&#x4E0A;&#x8FDB;&#x884C;&#x5199;&#x64CD;&#x4F5C;&#xFF0C;&#x539F;&#x6709;&#x5185;&#x5B58;&#x9875;&#x7EE7;&#x7EED;&#x4F9B;&#x5B50;&#x8FDB;&#x7A0B;&#x6301;&#x4E45;&#x5316;&#x3002;

&#x5BA2;&#x6237;&#x7AEF;&#x65B9;&#x5F0F;2&#xFF1A;SAVE
&#x5BA2;&#x6237;&#x7AEF;&#x8FD8;&#x53EF;&#x4EE5;&#x4F7F;&#x7528;SAVE&#x547D;&#x4EE4;&#x6765;&#x521B;&#x5EFA;&#x4E00;&#x4E2A;&#x5FEB;&#x7167;&#xFF0C;&#x63A5;&#x6536;&#x5230;SAVE&#x547D;&#x4EE4;&#x7684;redis&#x670D;&#x52A1;&#x5668;&#x4F1A;&#x5728;&#x5FEB;&#x7167;&#x521B;&#x5EFA;&#x5B8C;&#x6BD5;&#x4E4B;&#x524D;&#x4E0D;&#x518D;&#x54CD;&#x5E94;&#x4EFB;&#x4F55;&#x5176;&#x4ED6;&#x547D;&#x4EE4;

&#x670D;&#x52A1;&#x5668;&#x914D;&#x7F6E;&#x81EA;&#x52A8;&#x89E6;&#x53D1;:
&#x5982;&#x679C;&#x7528;&#x6237;&#x5728;redis.conf&#x4E2D;&#x8BBE;&#x7F6E;&#x4E86;save&#x914D;&#x7F6E;&#x9009;&#x9879;&#xFF0C;redis&#x4F1A;&#x5728;save&#x9009;&#x9879;&#x6761;&#x4EF6;&#x6EE1;&#x8DB3;&#x4E4B;&#x540E;&#x81EA;&#x52A8;&#x89E6;&#x53D1;&#x4E00;&#x6B21;BGSAVE&#x547D;&#x4EE4;&#xFF0C;&#x5982;&#x679C;&#x8BBE;&#x7F6E;&#x591A;&#x4E2A;save&#x914D;&#x7F6E;&#x9009;&#x9879;&#xFF0C;&#x6BCF;&#x5F53;&#x4EFB;&#x610F;&#x4E00;&#x4E2A;save&#x914D;&#x7F6E;&#x9009;&#x9879;&#x6761;&#x4EF6;&#x6EE1;&#x8DB3;&#xFF0C;redis&#x4E5F;&#x4F1A;&#x89E6;&#x53D1;&#x4E00;&#x6B21;BGSAVE&#x547D;&#x4EE4;

&#x670D;&#x52A1;&#x5668;&#x63A5;&#x6536;&#x5BA2;&#x6237;&#x7AEF;shutdown&#x6307;&#x4EE4;
- &#x5F53;redis&#x901A;&#x8FC7;shutdown&#x6307;&#x4EE4;&#x63A5;&#x6536;&#x5230;&#x5173;&#x95ED;&#x670D;&#x52A1;&#x5668;&#x7684;&#x8BF7;&#x6C42;&#x65F6;,&#x4F1A;&#x6267;&#x884C;&#x4E00;&#x4E2A;save&#x547D;&#x4EE4;,&#x963B;&#x585E;&#x6240;&#x6709;&#x7684;&#x5BA2;&#x6237;&#x7AEF;,&#x4E0D;&#x518D;&#x6267;&#x884C;&#x5BA2;&#x6237;&#x7AEF;&#x6267;&#x884C;&#x53D1;&#x9001;&#x7684;&#x4EFB;&#x4F55;&#x547D;&#x4EE4;,&#x5E76;&#x4E14;&#x5728;save&#x547D;&#x4EE4;&#x6267;&#x884C;&#x5B8C;&#x6BD5;&#x4E4B;&#x540E;&#x5173;&#x95ED;&#x670D;&#x52A1;&#x5668;

3.AOF方式——只追加日志文件

3.1 特点

这种方式可以将所有客户端执行的 写命令记录到日志文件中，AOF持久化会将被执行的写命令写到AOF的文件末尾，来记录数据发生的变化，因此只要redis从头到尾执行一次AOF文件所包含的所有写命令，就可以恢复AOF文件的记录的数据集。

3.2 开启AOF持久化

1.&#x4FEE;&#x6539; appendonly yes &#x5F00;&#x542F;&#x6301;&#x4E45;&#x5316;
2.&#x4FEE;&#x6539; appendfilename "appendonly.aof" &#x6307;&#x5B9A;&#x751F;&#x6210;&#x6587;&#x4EF6;&#x540D;&#x79F0;

3.3 日志追加频率

1.always[&#x8C28;&#x614E;&#x4F7F;&#x7528;]
&#x8BF4;&#x660E;&#xFF1A;&#x6BCF;&#x4E2A;redis&#x547D;&#x4EE4;&#x90FD;&#x8981;&#x540C;&#x6B65;&#x5199;&#x5165;&#x786C;&#x76D8;&#xFF0C;&#x4E25;&#x91CD;&#x964D;&#x4F4E;redis&#x901F;&#x5EA6;&#xFF0C;&#x8FD9;&#x79CD;&#x65B9;&#x5F0F;&#x53EF;&#x4EE5;&#x5C06;&#x53D1;&#x751F;&#x7CFB;&#x7EDF;&#x5D29;&#x6E83;&#x65F6;&#x4E22;&#x5931;&#x7684;&#x6570;&#x636E;&#x51CF;&#x5C11;&#x5230;&#x6700;&#x5C11;&#xFF0C;&#x4F46;&#x662F;&#x7531;&#x4E8E;&#x8FD9;&#x79CD;&#x65B9;&#x5F0F;&#x8981;&#x5BF9;&#x786C;&#x76D8;&#x8FDB;&#x884C;&#x5927;&#x91CF;&#x7684;&#x5199;&#x5165;&#x64CD;&#x4F5C;&#xFF0C;&#x6240;&#x4EE5;redis&#x5904;&#x7406;&#x547D;&#x4EE4;&#x7684;&#x901F;&#x5EA6;&#x4F1A;&#x53D7;&#x5230;&#x786C;&#x76D8;&#x6027;&#x80FD;&#x7684;&#x9650;&#x5236;&#x3002;&#x673A;&#x68B0;&#x786C;&#x76D8;&#x5728;&#x8FD9;&#x79CD;&#x9891;&#x7387;&#x4E0B;200&#x5DE6;&#x53F3;&#x4E2A;&#x547D;&#x4EE4;/s ;&#x56FA;&#x6001;&#x786C;&#x76D8;&#xFF08;SSD&#xFF09;&#x5927;&#x6982;&#x51E0;&#x767E;&#x4E07;&#x4E2A;&#x547D;&#x4EE4;/s;&#x4F7F;&#x7528;SSD&#x7528;&#x6237;&#x8BF7;&#x8C28;&#x614E;&#x4F7F;&#x7528;always&#x9009;&#x9879;,&#x8FD9;&#x79CD;&#x6A21;&#x5F0F;&#x4E0D;&#x65AD;&#x5199;&#x5165;&#x5C11;&#x91CF;&#x6570;&#x636E;&#x7684;&#x505A;&#x6CD5;&#x6709;&#x53EF;&#x80FD;&#x4F1A;&#x5F15;&#x53D1;&#x4E25;&#x91CD;&#x7684;写入放大&#x95EE;&#x9898;,&#x5BFC;&#x81F4;&#x5C06;&#x56FA;&#x6001;&#x786C;&#x76D8;&#x7684;&#x5BFF;&#x547D;&#x4ECE;&#x539F;&#x6765;&#x7684;&#x51E0;&#x5E74;&#x964D;&#x4F4E;&#x4E3A;&#x51E0;&#x4E2A;&#x6708;&#x3002;

2.everysec[&#x63A8;&#x8350;&#x9ED8;&#x8BA4;]
&#x8BF4;&#x660E;&#xFF1A;&#x6BCF;&#x79D2;&#x6267;&#x884C;&#x4E00;&#x6B21;&#x540C;&#x6B65;&#xFF0C;&#x5C06;&#x591A;&#x4E2A;&#x5199;&#x547D;&#x4EE4;&#x540C;&#x6B65;&#x5230;&#x78C1;&#x76D8;&#x3002;&#x5373;&#x4F7F;&#x7CFB;&#x7EDF;&#x5D29;&#x6E83;&#x4E5F;&#x6700;&#x591A;&#x4E22;&#x5931;&#x4E00;&#x79D2;&#x7684;&#x6570;&#x636E;&#x3002;

3.no[&#x4E0D;&#x63A8;&#x8350;]
&#x8BF4;&#x660E;&#xFF1A;&#x5B8C;&#x5168;&#x7531;&#x64CD;&#x4F5C;&#x7CFB;&#x7EDF;&#x51B3;&#x5B9A;&#x4EC0;&#x4E48;&#x65F6;&#x5019;&#x540C;&#x6B65;AOF&#x6587;&#x4EF6;&#xFF0C;&#x8FD9;&#x4E2A;&#x9009;&#x9879;&#x4E0D;&#x4F1A;&#x5BF9;redis&#x6027;&#x80FD;&#x5E26;&#x6765;&#x5F71;&#x54CD;&#xFF0C;&#x4F46;&#x662F;&#x5F53;&#x7CFB;&#x7EDF;&#x5D29;&#x6E83;&#x65F6;&#xFF0C;&#x4F1A;&#x4E22;&#x5931;&#x4E0D;&#x5B9A;&#x91CF;&#x7684;&#x6570;&#x636E;&#xFF0C;&#x751A;&#x81F3;&#x662F;&#x5168;&#x90E8;&#x6570;&#x636E;&#x3002;&#x53E6;&#x5916;&#x5982;&#x679C;&#x7528;&#x6237;&#x786C;&#x76D8;&#x5904;&#x7406;&#x5199;&#x5165;&#x64CD;&#x4F5C;&#x4E0D;&#x591F;&#x5FEB;&#x7684;&#x8BDD;,&#x5F53;&#x7F13;&#x51B2;&#x533A;&#x88AB;&#x7B49;&#x5F85;&#x5199;&#x5165;&#x786C;&#x76D8;&#x6570;&#x636E;&#x586B;&#x6EE1;&#x65F6;,redis&#x4F1A;&#x5904;&#x4E8E;&#x963B;&#x585E;&#x72B6;&#x6001;,&#x5E76;&#x5BFC;&#x81F4;redis&#x7684;&#x5904;&#x7406;&#x547D;&#x4EE4;&#x8BF7;&#x6C42;&#x7684;&#x901F;&#x5EA6;&#x53D8;&#x6162;&#x3002;

3.4 修改同步频率

&#x4FEE;&#x6539;appendfsync everysec|always|no &#x6307;&#x5B9A;

3.5 AOF文件的重写

3.5.1 出现的问题

AOF方式会出现一个问题，持久化文件会越来越大，例如我们调用incr test命令100次，文件中必须保存全部的100条命令，其实有99条都是多余的。因为要恢复数据库的状态其实文件中保存一条set test 100就够了。为了压缩aof的持久化文件Redis提供了AOF重写机制

3.5.2 AOF重写

用来在一定程度上减少AOF文件的体积，并且保证数据不丢失

3.5.3 触发AOF重写的方式

1.&#x5BA2;&#x6237;&#x7AEF;&#x65B9;&#x5F0F;
&#x6267;&#x884C;BGREWRITEAOF&#x547D;&#x4EE4;&#xFF0C;&#x4E0D;&#x4F1A;&#x963B;&#x585E;redis&#x670D;&#x52A1;

2.&#x670D;&#x52A1;&#x5668;&#x914D;&#x7F6E;&#x65B9;&#x5F0F;&#x81EA;&#x52A8;&#x89E6;&#x53D1;
&#x914D;&#x7F6E;redis.conf&#x4E2D;&#x7684;auto-aof-rewrite-percentage&#x9009;&#x9879; &#x53C2;&#x52A0;&#x4E0B;&#x56FE;&#x2193;&#x2193;&#x2193;
- &#x5982;&#x679C;&#x8BBE;&#x7F6E;auto-aof-rewrite-percentage&#x503C;&#x4E3A;100&#x548C;auto-aof-rewrite-min-size 64mb,&#x5E76;&#x4E14;&#x542F;&#x7528;&#x7684;AOF&#x6301;&#x4E45;&#x5316;&#x65F6;,&#x90A3;&#x4E48;&#x5F53;AOF&#x6587;&#x4EF6;&#x4F53;&#x79EF;&#x5927;&#x4E8E;64M,&#x5E76;&#x4E14;AOF&#x6587;&#x4EF6;&#x7684;&#x4F53;&#x79EF;&#x6BD4;&#x4E0A;&#x4E00;&#x6B21;&#x91CD;&#x5199;&#x4E4B;&#x540E;&#x4F53;&#x79EF;&#x5927;&#x4E86;&#x81F3;&#x5C11;&#x4E00;&#x500D;(100%)&#x65F6;,&#x4F1A;&#x81EA;&#x52A8;&#x89E6;&#x53D1;,&#x5982;&#x679C;&#x91CD;&#x5199;&#x8FC7;&#x4E8E;&#x9891;&#x7E41;,&#x7528;&#x6237;&#x53EF;&#x4EE5;&#x8003;&#x8651;&#x5C06;auto-aof-rewrite-percentage&#x8BBE;&#x7F6E;&#x4E3A;&#x66F4;&#x5927;

3.5.4 重写原理

开启AOF持久化后生成一个appendonlydir文件夹，这个文件夹下有如下三个文件

从Redis 7.0.0 开始，Redis使用了多部分AOF 机制。也就是将原来的单个AOF文件拆分为基础文件（最多一个）和增量文件（可能不止一个）。基本文件表示重写AOF 时存在的数据的初始（RDB 或 AOF 格式）快照。所有这些文件都放在一个单独的目录中，并由清单文件跟踪。

重写过程：在触发AOF重写后，redis调用fork创建一个子进程，子进程根据此时的数据状态生成快照，同时主进程会创建一个新的增量文件用来继续处理客户端传来的命令请求，子进程将这个快照文件以命令的形式写入临时文件，当快照往临时文件写完后，通知主进程把新的增量文件和子进程生成的基础文件构建成临时清单，并将其持久化，redis对清单文件进行原子交换，使AOF重写的结果生效，生成一个新的基础文件，并且创建一个新的aof增量文件来接收命令。

4.持久化总结

[TencentCloudSDKException] code:FailedOperation.ServiceIsolate message:service is stopped due to arrears, please recharge your account in Tencent Cloud requestId:16e45a55-35d3-4f15-bd3c-440b18087b25

[En]

[TencentCloudSDKException] code:FailedOperation.ServiceIsolate message:service is stopped due to arrears, please recharge your account in Tencent Cloud requestId:622165cc-4b44-4d93-804a-6ab862e5a948

无论使用AOF还是快照机制持久化,将数据持久化到硬盘都是有必要的,除了持久化外,用户还应该对持久化的文件进行备份(最好备份在多个不同地方)。

Original: https://www.cnblogs.com/bfy0221/p/16593009.html
Author: 伍点
Title: Redis的两种持久化机制

原创文章受到原创版权保护。转载请注明出处：https://www.johngo689.com/562078/

转载文章受原作者版权保护。转载请注明原作者出处！

2024 年 4 月
一	二	三	四	五	六	日
1	2	3	4	5	6	7
8	9	10	11	12	13	14
15	16	17	18	19	20	21
22	23	24	25	26	27	28
29	30