存储相关招聘信息-长期 工作地点武汉 深圳 岗位要求说明存储后台开发负责ceph,gluster等存储系统相关的模块开发,对相关的存储系统社区开发进展熟悉,能够独立进行backport熟悉存储系统之上的一些文件系统,nfs,samba,iscsi等等熟悉C语言 内核相关的开发熟悉ceph内核客户端相关的模块,能够对内核模块进行相关的开发或者集成功能,能够对高版本的功能进行低版本的适配能够对内核进行一定程度的内核调优熟悉C 2021-02-23 暂未分类 #暂未分类
强制backfill替代recover避免阻塞 前言做recover会触发阻塞,引起前端的IO卡住,可以通过参数避免这个情况 调整参数12345# the number of entries to keep in the pg log when trimming it. Defaults to 3000.osd_min_pg_log_entries = 1# the max entries, say when degraded, before 2021-01-30 暂未分类 #暂未分类
使用MegaRAID Storage Manager图形界面配置RAID 软件介绍软件的名称为LSI MegaRAID Storage Manager,很多厂商都会提供,本篇是从broadcom进行的下载,有的厂商也是直接跳转到这个网站的,比如华为的服务器,这里从这里下载就可以了 下载直接用下面的地址 https://www.broadcom.com/site-search?filters[pages][Content_Type][type]=and&filt 2021-01-27 暂未分类 #暂未分类
清理多台主机集群的脚本 目的清理环境所有的数据,删除并恢复到初始状态 脚本123456789101112131415161718#! /bin/shfor host in lab101 lab102dossh $host hostnamessh $host systemctl stop ceph-radosgw.targetssh $host systemctl stop ceph-osd.targetssh $hos 2021-01-26 暂未分类 #暂未分类
测试数据的可视化-通用化 前言如果测试数据是很大量的数据,并且是基于时间变化的,需要做成一个横轴为时间,纵轴为数值的可视化,这个有很多方法比如用excel做成图表形式的或者用powerbi或者其它软件做成波形图但是找了几个软件都没有想要的效果,grafana那种又太重了,需要配置很多东西,所以这里自己实现了一个简单但是实用的数据分析网页 架构首先是原始数据,这里需要对原始数据进行处理,把数据处理成时间,数值的csv文件格式 2021-01-19 暂未分类 #暂未分类
如何构建自己的远程高带宽环境 前言公网的云机器配置最小配置也要100左右一年,然后带宽也特别贵,默认最小配置只提供1M带宽,之前需要远程都是通过frp穿透,使用公网机器作为中转机器,如果只用命令行还好,碰到需要传输数据,那1M带宽使用起来就特别的卡了 而家里面的宽带是100M+的,公司的网络也很难给个人提供到这么大的带宽,所以可以利用家里的宽带构建个人的公网环境,家庭网络建议不要提供对外的服务,否则可能直接关网的,自己用不违法 2021-01-19 暂未分类 #暂未分类
mac常用软件记录 前言本片记录一些常用的软件,方便后续使用 软件windows远程桌面连接软件由于有些操作需要连接到windows上面做,所以需要能够方便的连接windows的电脑,所以需要一个windows的远程连接软件 royal tsx这个软件可以连接ssh,ftp,rdp等协议,但是免费版只能连10个,这个对于我来说太少了 Microsoft Remote Desktop 10.5.0(1841)这个是微 2021-01-19 暂未分类 #暂未分类
如何查看服务器上面的历史磁盘负载数据 前言服务器上面全天的负载可能存在不同,现在需要知道,之前环境上面负载的情况怎么样如果没做监控工具情况下,想看历史数据,这个就需要用到sar的历史记录了 方法通过对sar的历史数据的读取可以查看整个服务器上面的io之和,虽然不能精确到每个磁盘,但是也能够反应一定的磁盘的负载情况 1234567891011121314sar -b -f /var/log/sa/sa05[root@node101 zp 2021-01-13 暂未分类 #暂未分类
awk处理字符串方法汇总 说明本篇记录一些字符串的处理方法,这里不具体讲完整的方法,只记录遇到的需要处理的情况 用例用例一:解析ceph.log的ops由于ops的单位是有的带k的有的不带k的,那么需要匹配处理 字符串示例: 12021-01-13 11:09:55.664479 mgr.node103 client.994548 172.168.30.103:0/265828031 659839 : cluster [D 2021-01-13 暂未分类 #暂未分类
简单的统计剩余ceph迁移时间 需求由于迁移忽快忽慢,需要知道大概的迁移的时间,做了一个简单的统计脚本,可能不准,大概能够知道在什么范围内 脚本1234567891011121314151617181920#! /bin/shwhile ( 2>1 )do start=`ceph -s|grep pgs|grep mis|awk '{print $2}'|cut -d / -f 1` 2021-01-12 暂未分类 #暂未分类