乐胖代购免代理版

替换OSD操作的优化与分析

前言之前有写过一篇删除OSD的正确方式，里面只是简单的讲了下删除的方式怎样能减少迁移量，本篇属于一个扩展，讲述了 Ceph 运维当中经常出现的坏盘提换盘的步骤的优化基础环境两台主机每台主机8个 OSD，一共 16 个 OSD，副本设置为2，PG 数设置为800，计算下来平均每个 OSD 上的 P

其他

原创 2016-09-19 17:41:00 18 阅读

Centos7下Jewel版本radosgw服务启动

前言本篇介绍了centos7下jewel版本的radosgw配置，这里的配置是指将服务能够正常起来，不涉及到S3的配置，以及其他的更多的配置,radosgw后面的gw就是gateway的意思，也就是我们说的网关的意思，本篇中所提及的实例也就是网关的意思，说实例是将每个单独的网关更细化一点的说法很

其他

原创 2016-09-12 17:40:00 143 阅读

如何统计Ceph的RBD真实使用容量

前言 ceph的rbd一直有个问题就是无法清楚的知道这个分配的空间里面到底使用了多少，这个在Jewel里面提供了一个新的接口去查询，对于老版本来说可能同样有这个需求，本篇将详细介绍如何解决这个问题查询的各种方法目前已知的有三种方法 1、使用rbd du查询（Jewel才支持） 2、使用rbd d

Ceph

原创 2016-09-08 17:39:00 854 阅读

Ceph中的Copyset概念和使用方法

前言 copyset运用好能带来什么好处降低故障情况下的数据丢失概率（增加可用性）降低资源占用，从而降低负载 copyset的概念首先我们要理解copyset的概念，用通俗的话说就是，包含一个数据的所有副本的节点，也就是一个copyset损坏的情况下，数据就是全丢的如上图所示，这里的copy

Ceph

原创 2016-09-06 17:35:00 141 阅读

重写ceph-lazy

前言这个工具最开始是从sebastien的blog里面看到的，这个是 Gregory Charot（工具的作者）写的，通常我们在获取一个ceph的信息的时候，需要敲一连串的命令去获得自己需要的信息，可能需要一大堆的解析才能完成，而经常出现的是，使用了后，下次使用的时候，又要重来一遍，所以作者把这些

Ceph

原创 2016-08-28 17:33:00 92 阅读

Linux配置邮件发送信息

Linux

原创 2016-08-19 17:32:00 200 阅读

Ceph 状态报警告 pool rbd has many more objects per pg than average (too few pgs?)

定位问题 [root@lab8106 ~]# ceph -s cluster fa7ec1a1-662a-4ba3-b478-7cb570482b62 health HEALTH_WARN pool rbd has many more objects per pg than average (too

Ceph

原创 2016-07-27 17:31:00 719 阅读

如何替换Ceph的Journal

很多人会提出这样的问题：能不能够将 Ceph journal 分区从一个磁盘替换到另一个磁盘？怎样替换 Ceph 的 journal 分区？有两种方法来修改Ceph的journal：创建一个journal分区，在上面创建一个新的journal 转移已经存在的journal分区到新的分区上，这

Ceph

原创 2016-07-26 17:30:00 440 阅读

modprobe: FATAL: Module ceph not found解决办法

问题有可能你在进行 Ceph 文件系统挂载的时候出现下面的提示： modprobe: FATAL: Module ceph not found. mount.ceph: modprobe failed, exit status 1 mount error: ceph filesystem not

Ceph

原创 2016-07-24 17:29:00 2411 阅读

通过ceph-deploy安装不同版本ceph

之前有在论坛写了怎么用 yum 安装 ceph，但是看到ceph社区的群里还是有人经常用 ceph-deploy 进行安装，然后会出现各种不可控的情况，虽然不建议用ceph-deploy安装，但是既然想用，那就研究下怎么用好首先机器需要安装 ceph-deploy 这个工具，机器上应该安装好 ep

Ceph

原创 2016-07-14 17:28:00 380 阅读

重构rbd镜像的元数据

这个已经很久之前已经实践成功了，现在正好有时间就来写一写，目前并没有在其他地方有类似的分享，虽然我们自己的业务并没有涉及到云计算的场景，之前还是对rbd镜像这一块做了一些基本的了解，因为一直比较关注故障恢复这一块，东西并不难，总之一切不要等到出了问题再去想办法，提前准备总是好的，如果你有集群的问题，

其他

原创 2016-07-02 17:27:00 129 阅读

parted分区对齐

分区提示未对齐 [root@lab8106 ceph]# parted /dev/sdd GNU Parted 3.1 Using /dev/sdd Welcome to GNU Parted! Type 'help' to view a list of commands. (parted) p M

其他

原创 2016-06-24 17:26:00 160 阅读

rbd的增量备份和恢复

前言快照的功能一般是基于时间点做一个标记，然后在某些需要的时候，将状态恢复到标记的那个点，这个有一个前提是底层的东西没用破坏，举个简单的例子，Vmware 里面对虚拟机做了一个快照，然后做了一些系统的操作，想恢复快照，前提是存储快照的存储系统没用破坏，一旦破坏了是无法恢复的 ceph里面也有快照的

其他

原创 2016-06-22 17:24:00 117 阅读

rgw实现nfs的首测

功能介绍关于rgw实现nfs接口这个，刚接触的人可能并不清楚这个是个什么样的服务架构，rgw是ceph里面的对象存储接口，而nfs则是纯正的网络文件系统接口，这二者如何结合在一起,关于这个,有几个相关的链接供大家了解 ceph官方的RGW_NFS项目规划麦子迈关于RGW_NFS的文章之所以这个

rgw

原创 2016-06-19 17:22:00 218 阅读

其他

原创 2016-06-13 17:20:00 154 阅读

rbd无法map(rbd feature disable)

在jewel版本下默认开启了rbd的一些属性 [root@lab8106 ~]# ceph --show-config|grep rbd|grep features rbd_default_features = 61 RBD属性表： 61的意思是上面图中的bit码相加得到的值对rbd进行内核的ma

其他

原创 2016-06-07 17:18:00 504 阅读

加速OSD的启动

ceph是目前开源分布式存储里面最好的一个，但是在高负载下会有很多异常的情况会发生，有些问题无法完全避免，但是可以进行一定的控制，比如：在虚拟化场景下，重启osd会让虚拟机挂起的情况重新启动osd会给这个osd进程所在的磁盘带来额外的负载，随着前面业务的需求的增长，会增加对存储的I/O的需求，虽然

其他

原创 2016-06-07 17:17:00 592 阅读

利用虚拟化环境虚拟nvme盘

前情介绍 SPDK SPDK的全称为Storage Performance Development Kit ，是Intel发起的一个开源驱动项目，这个是一个开发套件，可以让应用程序在用户态去访问存储资源，具体做能做什么可以去官网看一下 SPDK官网 NVME NVMe其实与AHCI一样都是逻辑设备接

其他

原创 2016-06-04 17:14:00 1266 阅读

mon到底能坏几个

如果是在做ceph的配置，我们会经常遇到这几个问题问：ceph需要配置几个mon 答：配置一个可以，但是坏了一个就不行了，需要配置只是三个mon，并且需要是奇数个问：ceph的mon能跟osd放在一起么，需要配置很好么？答：能跟放在一起，但是建议在环境允许的情况下一定独立机器，并且mon的配置

其他

原创 2016-05-26 17:12:00 143 阅读

ceph的jewel新支持的rbd-nbd

jewel版本新增加了一个驱动NBD，允许librbd实现一个内核级别的rbd NBD相比较于kernel rbd： rbd-ko是根据内核主线走的，升级kernel rbd需要升级到相应的内核，改动太大 rbd-ko的开发要慢于librbd，需要很多的时间才能追赶上librbd rbd-nbd是通

Ceph

原创 2016-05-19 17:11:00 282 阅读

支持jewel版本的calamari

之前测试了下，发现calamari不支持jewel版本的，是因为接口了有了一些变化，在提出这个问题后，作者给出了回答，说肯定会支持的，并且做了一点小的改动，就可以支持了，这个作者merge了到了github的一些分支当中，但是还没有merge到最新的1.4的分支合master分支当中，这个可能是因为

其他

原创 2016-05-16 17:10:00 119 阅读

ceph卡在active+remapped状态

最近看到了有人的环境出现了出现了卡在active+remapped状态，并且卡住不动的状态，从pg的状态去看，这个pg值分配了主的pg，没有分配到副本的osd，集群的其他设置一切正常这个从网上搜寻到的资料来看，大多数都是由于不均衡的主机osd引起的，所谓不平衡的osd 一台机器上面的磁盘的容量不一

Ceph

原创 2016-05-14 17:08:00 423 阅读

性能数据的可视化

在工作当中，很多时候我们在去分析一个性能的时候，会产生大量的数据，面对数据的时候我们一般应该会有以下几个处理过程直接肉眼看这个属于第一个级别，比如监控系统负载的时候去用top观察，这个方法是我最开始经常使用的一种方法，这个适合异常的时候使用，但是实际上获取的数据是有偏差的有监控系统使用数据监

性能

数据

原创 2016-04-27 17:06:00 646 阅读

mon的稳定性问题

MON的稳定性问题： mon的选举风暴影响客户端IO LevelDB的暴涨频繁的客户端请求的DDOS mon选举风暴： monmap会因为mon之间或者mon与客户端之间网络的影响或者消息传递的异常发生变化,从而触发选举会造成客户端的请求变慢或者锁住 LevelDB的暴涨： LevelDB的大小

其他

原创 2016-04-25 17:04:00 266 阅读

backfill和recovery的最优值

ceph在增加osd的时候会触发backfill，让数据得到平均，触发数据的迁移 ceph在移除osd的时候需要在节点上进行数据的恢复，也有数据的迁移和生成只要是集群里面有数据的变动就会有网卡流量，cpu，内存等资源的占用，并且最重要的是还有磁盘的占用，这个客户端也是需要对磁盘进行访问的，当请求出

其他

原创 2016-04-24 17:03:00 177 阅读

inkscope完整安装配置

准备centos7基础系统首先安装基础系统centos7 在安装选项那里选择base web server ，选择其他的也可以，选择mini安装会缺很多常用的软件包，后续需要一个个安装比较麻烦关闭防火墙相关 [root@inkscope ~]# setenforce 0 [root@inksco

其他

原创 2016-04-19 16:49:00 141 阅读

记一次不完全成功到成功的失效恢复(20160412)

更新在经历了好几天后，失效的环境最终变成了可用状态，只能说有的时候不放弃还真是有点用的在不久前处理了一个故障恢复以后，又碰上一个群友的集群出现了严重故障，本篇将记录这个中间大致处理的过程，一些细节在以后会补充首先看到给出的截图显示的是大量的pg处于异常的状态，从经验上判断，环境要么处于down

其他

原创 2016-04-13 16:48:00 30 阅读

记一次ceph的故障修复(20160408)

ceph的在正常运行的时候基本不会出现故障，出现故障一般在变动的时候，具体有下面几种可能出现的情形软件升级增加存储节点减少存储节点调整副本数目调整pg数目磁盘出现损坏节点网络出现异常以上这些操作过程中是最可能出现异常的情形，并不是一定会出问题，以上问题除了网络和磁盘问题出现的异常是基

Ceph

原创 2016-04-11 16:48:00 357 阅读

ceph在centos7下一个不容易发现的改变

在centos6以及以前的osd版本，在启动osd的时候，回去根据ceph.conf的配置文件进行挂载osd，然后进行进程的启动，这个格式是这样的 [osd.0] host = hostname devs=/dev/sdb1 启动的时候就会把sdb1盘符挂载到0的目录里面去了然后在centos7的

Ceph

原创 2016-03-31 16:45:00 61 阅读

rbd-mirror新功能

RBD 的 mirroring 功能将会在下一个稳定版本Jewel中实现，这个Jewel版本已经发布了第一个版本10.1.0,这个功能已经在这个发布的版本中实现了一、基本原理我们试图解决的或者至少需要克服的问题是，ceph在内部是强一致性的，这个对于跨区域的情况数据同步是无法接受的，一个请求需要

其他

原创 2016-03-30 16:40:00 124 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

替换OSD操作的优化与分析

Centos7下Jewel版本radosgw服务启动

如何统计Ceph的RBD真实使用容量

Ceph中的Copyset概念和使用方法

重写ceph-lazy

Linux配置邮件发送信息

Ceph 状态报警告 pool rbd has many more objects per pg than average (too few pgs?)

如何替换Ceph的Journal

modprobe: FATAL: Module ceph not found解决办法

通过ceph-deploy安装不同版本ceph

重构rbd镜像的元数据

parted分区对齐

rbd的增量备份和恢复

rgw实现nfs的首测

CPU相关的学习

rbd无法map(rbd feature disable)

加速OSD的启动

利用虚拟化环境虚拟nvme盘

mon到底能坏几个

ceph的jewel新支持的rbd-nbd

支持jewel版本的calamari

ceph卡在active+remapped状态

性能数据的可视化

mon的稳定性问题

backfill和recovery的最优值

inkscope完整安装配置

记一次不完全成功到成功的失效恢复(20160412)

记一次ceph的故障修复(20160408)

ceph在centos7下一个不容易发现的改变

rbd-mirror新功能

欢迎