news 2026/7/14 11:25:02

Ceph基础原理分享

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
Ceph基础原理分享

1、Ceph存储架构

2、Radosgw层

2.1 Bucket & Object

3、Rados层

3.1 重要成员

3.2 Pool & Object

3.3 Object 对象寻址

3.4 PG PGP

3.5 Crush Map

4、RadosgwObject VS RadosObject

5. Ceph调优配置

a.PG和PGP分配 参考https://ceph.com/pgcalc/

b.建议取消分片功能

rgw_dynamic_resharding = false

注:目前开源社区功能不稳定,建议提前预估数据量,对bucket进行手动分片

c.给指定Pool设置SSD

ceph osd crush set-device-class ssd osd.0

ceph osd crush rule create-replicated rule-ssd default host ssd

ceph osd pool create default.rgw.buckets.index 4 4 rule-ssd

d.Radosgw GC参数配置调优

rgw_gc_max_objs是控制每次GC任务可处理的最大对象数,高速存储设备可以适当扩大,当底层存储设备比较慢并且负载较高的时候,可适当缩小。

rgw_gc_processor_max_time是控制每次GC任务最多能够执行的时长,高速存储设备可以适当缩小,当底层存储设备比较慢并且负载较高的时候,可适当调大。

rgw_gc_obj_min_wait 是控制删除数据以后多久以后开始真正的底层数据回收,默认是2小时,如果线上对空间资源利用率比较敏感,可以适当缩短。

rgw_gc_processor_period 是控制多久时长以后GCworker开始下一轮的GC操作,如果单次GC需要操作的列表条目数较少,可以适当缩短这个参数。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/7/14 23:56:21

如何用Open-AutoGLM实现一键推理部署?这套模板让你少走3个月弯路

第一章:Open-AutoGLM一键推理部署的核心价值在大模型快速发展的背景下,Open-AutoGLM 的一键推理部署能力显著降低了开发者和企业的使用门槛。该功能将复杂的环境配置、依赖安装与服务启动流程封装为自动化脚本,使用户能够在几分钟内完成本地或…

作者头像 李华
网站建设 2026/7/14 22:11:10

Excalidraw AI无法识别指令怎么办?常见问题解答

Excalidraw AI无法识别指令怎么办?常见问题解答 在远程协作和敏捷开发日益成为主流的今天,可视化沟通的重要性愈发凸显。无论是产品原型讨论、系统架构设计,还是日常会议记录,一张清晰的草图往往胜过千言万语。然而,手…

作者头像 李华
网站建设 2026/7/11 10:35:10

17、Windows Server 2003 集群与负载均衡解决方案设计

Windows Server 2003 集群与负载均衡解决方案设计 1. 新命令行工具:DiskPart Windows Server 2003 对命令行工具进行了增强,其中新的 DiskPart 命令行工具可用于从命令行对集群服务进行磁盘分区管理。 - 进入 DiskPart :打开命令提示符,输入 DiskPart 并按回车键。进…

作者头像 李华
网站建设 2026/7/14 17:42:54

18、深入解析Windows Server 2003 NLB集群配置

深入解析Windows Server 2003 NLB集群配置 1. 前期准备与硬件考量 在构建网络负载均衡(NLB)集群前,需考虑路由器的功能。要确保购买的路由器能够处理包含两个不同媒体访问控制(MAC)地址的ARP回复,因为NLB集群在实际数据有效负载和报头中分别需要一个MAC地址。 - 若路由…

作者头像 李华
网站建设 2026/7/13 21:26:22

22、SharePoint内容类型全解析与开发实践

SharePoint内容类型全解析与开发实践 1. 内容类型层次结构与分组 在SharePoint中,内容类型以层次结构的形式进行组织。每个内容类型都从其父内容类型继承属性和设置。这意味着,当我们创建新的内容类型时,需要选择一个现有的父内容类型。例如,“System” 内容类型处于层次…

作者头像 李华
网站建设 2026/7/13 13:47:46

34、SharePoint 功能打包与部署全解析

SharePoint 功能打包与部署全解析 1. 多功能部署的挑战与解决方案 在 SharePoint 环境中,当仅需安装单个功能时,手动安装、卸载、激活和停用功能的过程并不复杂。但如果要一次性安装多个功能,手动操作就会变得繁琐。此时,SharePoint 解决方案打包应运而生,它提供了一种将…

作者头像 李华