Ceph介绍

Ceph简介Ceph是一个开源的分布式存储系统旨在提供高性能、高可靠性和无限扩展性的存储服务。它通过智能的数据分布算法消除单点故障适用于对象存储、块存储和文件系统等多种存储需求。核心架构分布式对象存储RADOSCeph的基础层是可靠自愈分布式对象存储RADOS由多个存储节点OSD构成。数据以对象形式存储并通过CRUSH算法动态分布到集群中无需中央元数据服务器。用户接口RBD/RGW/CephFS ↓ 存储池Pool逻辑分区 ↓ OSD集群物理数据存储节点智能存储节点OSD每个OSDObject Storage Daemon既是存储单元也是智能代理自主处理数据读写、复制和恢复实时监控相邻节点状态动态参与数据再均衡元数据管理MON监控Monitor集群维护轻量级元数据如OSD映射通过Paxos算法保证一致性集群规模扩大时性能几乎不受影响。技术优势无限扩展性新增节点时通过CRUSH算法自动重分布数据伪随机权重映射避免传统哈希取模导致的数据迁移风暴。系统容量可线性扩展至艾字节EB级别。高容错机制多副本默认3副本数据散落在不同故障域如机架。纠删码EC$$ \small{\text{存储效率提升至 } \frac{n}{nm} \text{如 } k8, m4 \text{ 时容错25%}} $$高性能设计就近写入客户端直接与OSD通信减少中间层开销。并行读写单一文件可拆分到数百个OSD同时操作。应用场景接口类型协议典型场景RBD块设备虚拟磁盘如QEMUOpenStack云平台虚拟盘RGW对象S3/Swift API海量图片/视频归档存储CephFS文件POSIX 标准HPC共享存储部署案例公有云与OpenStack/Kubernetes集成科研机构替代传统NAS如Lustre大数据CephSpark处理PB级日志分析Ceph通过完全的软件定义实现硬件无关性已成为云时代核心存储基座。