大网数据广告活动
磁盘与文件系统

存储空间直通中的容错和存储效率

· 52CE 我爱测

介绍存储空间直通中的复原选项,包括镜像和奇偶校验。

适用于:Windows Server 2016

本主题介绍 存储空间直通 中可用的复原选项,并概述每个规模要求、存储效率以及每个选项的总体优点和利弊。 本主题还提供了一些用法说明来帮助你入门,并参考了一些极佳的论文、博客和其他内容供你了解详情。

如果你已熟悉存储空间,可以跳到摘要部分。

概述

在本质上,存储空间涉及为数据提供容错,通常称为“复原”。 其实现方式类似于 RAID,但分布在不同的服务器中,并在软件中实现。

如同 RAID,存储空间可通过多种不同的方法实现其功能,这些方法在容错、存储效率和计算复杂性方面各有利弊。 这些大致可分为两类:“镜像”和“奇偶校验”,后者有时称为“擦除编码”。

镜像

镜像功能通过保存所有数据的多个副本来提供容错。 它非常类似于 RAID-1。 这些数据的条带化和放置方式非常重要(请参阅此博客了解详细信息),但肯定的是,使用镜像功能存储的任何数据都会完整地写入多次。 每个副本将写入不同的物理硬件(位于不同服务器中的不同驱动器),假设每个硬盘各自都有可能发生故障。

在 Windows Server 2016 中,存储空间提供两类镜像:“双向”和“三向”。

双向镜像

双向镜像写入所有内容的两个副本。 存储效率为 50%,即若要写入 1 TB 的数据,需要至少 2 TB 的物理存储容量。 同理,至少需要两个硬件“容错域”– 使用存储空间直通时,这意味着需要两台服务器。

two-way-mirror

WARNING 如果你有两个以上的服务器,我们建议改用三向镜像。

三向镜像

三向镜像写入所有内容的三个副本。 存储效率为 33.3%,即若要写入 1 TB 的数据,需要至少 3 TB 的物理存储容量。 同理,至少需要三个硬件容错域 – 使用存储空间直通时,这意味着需要三台服务器。

三向镜像可以安全承受至少两个硬件(驱动器或服务器)同时出现问题。 例如,如果你正在重新启动一台服务器,此时另一个驱动器或服务器突然发生故障,在这种情况下,所有数据将保持安全,可供持续访问。

three-way-mirror

奇偶校验

奇偶校验编码(通常称为 "擦除编码")通过按位算法提供容错,这可能会产生极 复杂的复杂性。 相比于镜像,此方法的工作原理较为隐晦,但有许多极佳的在线资源(例如,此第三方擦除编码入门指南)可帮助你了解其思路。 简单而言,它可以提供更好的存储效率,且不影响容错能力。

在 Windows Server 2016 中,存储空间提供两类奇偶校验:“单”奇偶校验和“双”奇偶校验,后者在更大范围内使用名为“本地重建代码”的高级技术。

Important: 我们建议对大多数性能敏感型工作负荷使用镜像。 有关如何根据工作负荷均衡性能和容量的详细信息,请参阅规划卷。

单一奇偶校验

单一奇偶校验只保留一个按位奇偶校验符号,每次只能针对一次故障提供容错。 此方法非常类似于 RAID-5。 若要使用单一奇偶校验,至少需要三个硬件容错域 – 使用存储空间直通时,这意味着需要三台服务器。 由于三向镜像能够以相同的规模提供更高的容错,因此我们不建议使用单一奇偶校验。 但是,如果你坚决要使用它,它是完全受支持的。

WARNING 我们之所以不建议使用单一奇偶校验,是因为它每次只能安全承受一次硬件故障:如果另一驱动器或服务器突然发生故障时重新启动某一台服务器,则会遇到停机。 如果你只有三台服务器,我们建议使用三向镜像。 如果你有四台或更多服务器,请参阅下一部分。

双重奇偶校验

双重奇偶校验运行 Reed-Solomon 纠错代码,以保留两个按位奇偶校验符号,因此提供与三向镜像相同的容错(即,每次最多可以承受两次故障),但其存储效率更高。 此方法非常类似于 RAID-6。 若要使用双重奇偶校验,至少需要四个硬件容错域 – 使用存储空间直通时,这意味着需要四台服务器。 在这种规模下,存储效率为 50% – 若要存储 2 TB 数据,需要 4 TB 物理存储容量。

dual-parity

双奇偶校验的存储效率增加了用户所拥有的硬件容错域,即从 50% 增加到最高 80%。 例如,在七(对于存储空间直通而言,这意味着七台服务器)时,效率跃至 66.7%,即若要存储 4 TB 数据,只需 6 TB 的物理存储容量。

dual-parity-wide

请参阅摘要部分,了解每种规模下的双重奇偶校验效率和局部重建代码。

局部重建代码

Windows Server 2016 中的存储空间引入了 Microsoft Research 开发的名为“本地重建代码”或 LRC 的高级技术。 规模较大时,双重奇偶校验会使用 LRC 将其编码/解码拆分成一些较小的组,以降低进行写入或从故障中恢复所需的开销。

使用机械硬盘 (HDD) 时,组的大小为四个符号;使用固态硬盘 (SSD) 时,组的大小为六个符号。 例如,下面是使用机械硬盘和 12 个硬件容错域(即 12 台服务器)时的布局外观 – 有两个组,每个组为四个数据符号。 它实现了 72.7% 的存储效率。

local-reconstruction-codes

我们建议这一深入 了解本地重建代码如何处理各种故障方案,以及我们的 Claus Joergensen,这是我们的 eminently。

镜像加速奇偶校验

从 Windows Server 2016 开始,一个存储空间直通卷可以一部分是镜像,另一部分是奇偶校验。 写入内容先进入镜像部分,然后逐渐移入奇偶校验部分。 实际上,这是使用镜像来加速擦除编码。

若要混合使用三向镜像和双重奇偶校验,至少需要四个容错域,即四台服务器。

镜像加速奇偶校验的存储效率介于全镜像或全奇偶校验的效率之间,并取决于所选的比例。 例如,此演示第 37 分钟标记处的演示文稿显示 12 台服务器的各种混合实现了 46%、54% 和 65% 的效率。

Important: 我们建议对大多数性能敏感型工作负荷使用镜像。 有关如何根据工作负荷均衡性能和容量的详细信息,请参阅规划卷。

摘要

本部分汇总了存储空间直通中提供的复原类型、使用每种类型所要满足的最低规模要求、每个类型可承受的故障次数,以及相应的存储效率。

复原类型

复原能力 容错 存储效率
双向镜像 1 50.0%
三向镜像 2 33.3%
双重奇偶校验 2 50.0% - 80.0%
Mixed 2 33.3% - 80.0%

最低规模要求

复原能力 所需的最小容错域数
双向镜像 2
三向镜像 3
双重奇偶校验 4
Mixed 4

TIP 除非使用机箱或机架容错,否则容错域数目是指服务器数目。 只要符合存储空间直通的最低要求,每台服务器中的驱动器数目就不会影响可用的复原类型。

混合部署的双重奇偶校验效率

下表显示了同时包含机械硬盘 (HDD) 和固态硬盘 (SSD) 的混合部署在每种规模下的双重奇偶校验存储效率和局部重建代码。

容错域 布局 效率
2 – –
3 – –
4 RS 2+2 50.0%
5 RS 2+2 50.0%
6 RS 2+2 50.0%
7 RS 4+2 66.7%
8 RS 4+2 66.7%
9 RS 4+2 66.7%
10 RS 4+2 66.7%
11 RS 4+2 66.7%
12 LRC (8, 2, 1) 72.7%
13 LRC (8, 2, 1) 72.7%
14 LRC (8, 2, 1) 72.7%
15 LRC (8, 2, 1) 72.7%
16 LRC (8, 2, 1) 72.7%

全闪存部署的双重奇偶校验效率

下表显示了包含固态硬盘 (SSD) 的全闪存部署在每种规模下的双重奇偶校验存储效率和局部重建代码。 奇偶校验布局可以使用较大的组大小,并在全闪存配置中实现更好的存储效率。

容错域 布局 效率
2 – –
3 – –
4 RS 2+2 50.0%
5 RS 2+2 50.0%
6 RS 2+2 50.0%
7 RS 4+2 66.7%
8 RS 4+2 66.7%
9 RS 6+2 75.0%
10 RS 6+2 75.0%
11 RS 6+2 75.0%
12 RS 6+2 75.0%
13 RS 6+2 75.0%
14 RS 6+2 75.0%
15 RS 6+2 75.0%
16 LRC (12, 2, 1) 80.0%

示例

除非只有两台服务器,否则我们建议使用三向镜像和/或双重奇偶校验,因为它们提供更好的容错。 具体而言,即使两个容错域(使用存储空间直通时,这意味着需要两台服务器)由于同时发生的故障而受到影响,这些方法也能确保所有数据保持安全且持续可供访问。

所有组件保持联机的示例

这六个示例演示了三向镜像和/或双重奇偶校验可以承受的故障。

  • 1. 一个驱动器丢失(包括缓存驱动器)
  • 2. 一台服务器丢失

fault-tolerance-examples-1-and-2

  • 3. 一个服务器和一个驱动器丢失
  • 4. 不同服务器中的两个驱动器丢失

fault-tolerance-examples-3-and-4

  • 5. 两个以上的驱动器丢失,但最多两台服务器受影响
  • 6. 两台服务器丢失

fault-tolerance-examples-5-and-6

...在每种情况下,所有卷都将保持联机状态。 (请确保群集中保留了仲裁。)

所有组件脱机的示例

在其生存期内,存储空间可以承受任意次数的故障,因为在时间足够的情况下,它在每次故障后能够完全复原。 但是,在任意给定时刻,最多只能有两个容错域能够受到故障影响而安全无虞。 下面是三向镜像和/或双重奇偶校验不能承受的故障示例。

  • 7. 三台或更多服务器中的驱动器同时丢失
  • 8. 三台或更多服务器同时丢失

fault-tolerance-examples-7-and-8

使用情况

查看在存储空间直通中创建卷。

其他参考

以下所有链接均是本主题正文某个位置的内联。

历史资料。此文对应 2021-03-23 的中文文档快照,适用产品版本和命令行为以原文为准。

来源与署名:Microsoft 和文档贡献者(原始作者元数据 cosmosdarwin)。固定版本原文。文档采用 CC BY 4.0,示例代码采用 MIT 授权。本站将 Markdown 转为 HTML,规范化链接,移除外部媒体、发布器占位标签和导航标记。

资料来源与适用范围

资料来源
Microsoft / Windows Server 中文文档历史快照
适用范围
历史中文快照 2021-03-23;详见原文产品版本;文档日期 10/11/2017
内容语言
中文;命令、路径和错误标识保留技术原文
本地收录日期
2026-11-16
授权说明
CC BY 4.0(文档)/ MIT(示例代码)

正文与所需资源由本站本地存储。查看来源及更新记录 ↗

请按适用版本和实际日志确认原因;本站没有对每一种系统或设备逐项执行文中的操作。