4.7华为FusionStorage-云计算那些事儿：从IaaS到PaaS进阶(二)

当前位置:　首页>> 技术小册>> 云计算那些事儿：从IaaS到PaaS进阶(二)

### 4.7 华为FusionStorage：分布式存储的进阶应用

在云计算的广阔领域中，存储系统作为支撑上层应用和数据服务的基础设施，其重要性不言而喻。随着数据量的爆炸式增长和业务的多样化需求，传统的存储架构已难以满足现代企业的需求。华为FusionStorage作为一款先进的分布式存储解决方案，以其高扩展性、高性能、高可靠性和高安全性，在云计算市场中占据了重要地位。本章将深入探讨华为FusionStorage的技术架构、关键特性、应用场景以及部署实践，为读者提供从IaaS到PaaS进阶的全面视角。

#### 4.7.1 FusionStorage概述

FusionStorage是华为推出的一款可大规模横向扩展的分布式存储系统，旨在为企业提供高效、灵活且可靠的存储服务。它通过存储系统软件将通用服务器硬件的本地存储资源组织起来，按需为上层应用提供块存储、对象存储或文件存储服务，满足云和AI时代复杂的业务负载对存储提出的更高性能、容量和扩展性需求。FusionStorage不仅支持传统的x86架构，还深度兼容ARM硬件平台，实现了软硬件的解耦，为企业提供了更多的选择和灵活性。

#### 4.7.2 FusionStorage的技术架构

FusionStorage的技术架构由多个核心组件构成，包括MDC（Metadata Controller）、VBS（Virtual Block Service）、OSD（Object Storage Device）等，这些组件共同协作，实现了数据的高可用性和高性能。

- **MDC（Metadata Controller）**：元数据控制组件，负责分布式集群的状态控制、数据分布规则和重建规则等。MDC采用多节点部署方式，通过ZooKeeper集群进行选主和状态同步，确保系统的稳定性和可靠性。
- **VBS（Virtual Block Service）**：虚拟块服务组件，提供分布式接入点服务，是FusionStorage存储服务的入口。VBS通过SCSI或iSCSI接口向上层应用提供块存储服务，支持多服务器形成VBS集群，提高系统的并发处理能力和扩展性。
- **OSD（Object Storage Device）**：对象存储设备，负责接管底层存储介质，向上模拟出块对象存储，并处理VBS下发的IO流程，提供持久化存储。OSD进程通常部署在存储节点上，每个服务器上可启动多个OSD进程以提高性能。

此外，FusionStorage还利用DHT（Distributed Hash Table）分布式哈希表算法，将OSD提供的磁盘资源分成大量地址块，并通过LBA ID和Partition进行管理和查找，确保数据的均匀分布和快速访问。

#### 4.7.3 FusionStorage的关键特性

1. **高弹性和扩展性**：FusionStorage支持从几个节点扩展到数千节点的横向扩展能力，提供性能容量的线性增长。其基于DHT架构和动态智能分区技术，实现了业务均衡分布和存储高可靠性的同时，保证了存储的高性能。

2. **高性能**：FusionStorage采用FlashLink®性能加速技术，结合NVMe SSD介质，即使在开启数据缩减功能的情况下，也能提供低至1毫秒的稳定时延。同时，支持小IO聚合、大IO直通等技术，进一步优化了存储性能。

3. **高可靠性**：FusionStorage支持多副本和EC（Erasure Coding）两种数据冗余保护机制，提供灵活的数据可靠性策略。单系统最大可容忍4个节点或4个机柜同时故障，节点故障时系统可靠性不降级。此外，还支持端到端数据完整性校验、全面的系统亚健康检测与自愈等功能，确保数据的安全性和可靠性。

4. **高安全性**：FusionStorage采用自研的操作系统进行安全加固，支持通过加密通道（HTTPS）方式传输数据，保证数据在传输环节不被泄露。同时，支持数据访问权限控制、审计日志等安全功能，满足企业安全合规需求。

5. **数据保护**：提供快照、远程复制、双活等丰富的数据保护机制。HyperSnap特性支持生成只读快照并创建可写镜像，用于数据分析和测试。HyperMetro特性支持跨数据中心的双活解决方案，确保业务连续性和数据零丢失。

6. **高易用性**：FusionStorage支持网络拓扑统一管理，管理维护高效集中，简洁易用。同时，支持精简配置、QoS、Cache等存储高级特性，满足不同业务场景的需求。

7. **开放兼容**：FusionStorage广泛兼容各种存储介质、Cache介质和网络介质类型，支持工业界标准的SCSI和iSCSI接口。同时，支持多种虚拟化平台和云平台集成，如华为FusionSphere、VMware vSphere、OpenStack等，为企业提供灵活的存储解决方案。

#### 4.7.4 FusionStorage的应用场景

FusionStorage凭借其卓越的性能和可靠性，在多个领域得到了广泛应用。

1. **虚拟化/云资源池**：在大规模云计算数据中心中，FusionStorage将通用存储服务器池化，建立大规模块存储资源池，提供标准的块存储数据访问接口（SCSI和iSCSI）。通过与各种云平台集成，按需分配存储资源，提升存储资源的部署、扩展和运维效率。

2. **关键业务数据库**：FusionStorage提供分布式Active-Active双活、稳定低时延等企业级能力，保障OLAP或OLTP类关键业务数据库高效稳定运行。通过Infiniband进行服务器互联以及SSD做Cache或主存等关键技术，进一步提高存储系统的性能和可靠性。

3. **大数据分析**：FusionStorage支持大数据存储和访问需求，为Hadoop、Spark等大数据平台提供高性能的存储解决方案。通过分布式存储架构和智能数据识别与处理技术，优化大数据处理性能，加速企业数字化转型。

4. **混合云场景**：作为华为公有云和私有云存储服务的共同基础架构，FusionStorage提供了业界唯一的原生云存储能力。支持企业在公有云和私有云之间实现数据的无缝迁移和共享，帮助企业以更平滑的方式实现企业数据在线上（公有云）、线下（企业私有云数据中心）的合理分布。

#### 4.7.5 FusionStorage的部署实践

FusionStorage的安装部署相对复杂，需要根据实际场景选择合适的部署模式和配置参数。一般来说，FusionStorage支持两种部署模式：融合部署模式和分离部署模式。

- **融合部署模式**：VBS与OSD部署在同一物理主机上，适用于资源较为紧张的场景。该模式下，VBS和OSD共享计算资源和网络资源，简化了部署过程，但可能面临资源竞争的问题。

- **分离部署模式**：VBS与OSD部署在不同物理主机上，通过高速网络互联。该模式下，VBS和OSD各自独立运行，避免了资源竞争的问题，但增加了部署的复杂性和成本。

在部署FusionStorage时，需要按照以下步骤进行：

1. **安装准备**：包括硬件环境准备、软件环境准备和网络环境准备。确保所有服务器硬件符合FusionStorage的硬件要求，并安装好操作系统和必要的软件。

2. **安装部署FusionStorage平台**：包括安装FSM虚拟机、配置FSM虚拟机、安装FSA组件、配置存储网络以及配置FusionStorage Block块存储等步骤。在安装过程中，需要注意各组件之间的依赖关系和配置参数的正确性。

3. **对接存储资源**：通过FusionCompute等虚拟化平台对接FusionStorage存储资源，实现存储资源的统一管理和调度。在对接过程中，需要配置相应的存储网络参数和存储策略，确保存储资源的可用性和性能。

4. **测试和调优**：在部署完成后，需要进行全面的测试和调优工作，包括性能测试、稳定性测试、兼容性测试等。通过测试发现潜在的问题并进行优化调整，确保FusionStorage能够稳定运行并满足业务需求。

#### 4.7.6 结论

华为FusionStorage作为一款先进的分布式存储解决方案，以其高扩展性、高性能、高可靠性和高安全性等特点，在云计算市场中占据了重要地位。通过深入了解FusionStorage的技术架构、关键特性、应用场景以及部署实践，读者可以更好地掌握分布式存储技术的核心原理和应用方法，为云计算的进阶应用打下坚实的基础。随着云计算技术的不断发展和应用的深入拓展，FusionStorage将继续发挥其优势作用，为企业数字化转型和业务发展提供强有力的支撑。

该分类下的相关小册推荐：

企业级监控系统Zabbix

深入浅出分布式技术原理

从零开始学微服务

MySQL数据库实战

DevOps开发运维实战

Linux内核技术实战

分布式数据库入门指南

Linux常用服务器部署实战

RocketMQ入门与实践

从零开始学大数据

Web大并发集群部署

Docker容器实战部署