2025
05-26

[原创] Redis 各版本命令大全

一、通用命令 二、Redis 3.x 版本 三、Redis 4.x 版本 四、Redis 5.x 版本 redis-cli --cluster命令 Redis Cluster 在5.0之后取消了ruby脚本 redis-trib.rb的支持（手动命令行添加集群的方式不.... Read More >

2025
05-22

运维必会工具02：Rsync 命令详解

一、rsync 命令核心功能与基本语法 1、核心功能 增量同步：仅传输源文件与目标文件之间的差异部分，大幅减少数据传输量。 跨平台支持：适用于本地文件系统、远程 SSH 或 rsync 协议连接的服务器。 元数据保留：支持保留文件权限、时间戳、符号链接、硬链接等属性。 .... Read More >

2025
05-21

Redis 7.0 无盘复制与共享复制积压缓冲区详解

一、无盘操作的背景与原理 Redis 是一个高性能的内存数据库，其主从复制机制在数据同步中扮演着重要角色。随着 Redis 版本的不断迭代，其复制机制也在不断优化。本文将深入探讨 Redis 7.0 的无盘操作与共享复制积压缓冲区的原理及应用场景。 在 Redis 的主从复制中，传统的.... Read More >

2025
05-06

Redis Bigkey 分析工具

背景 Redis 大 key 分析工具主要分为两类： 离线分析 基于 RDB 文件进行解析，常用工具是 redis-rdb-tools（https://github.com/sripathikrishnan/redis-rdb-tools）。 不过这个工具已近 5 年未更新.... Read More >

2025
04-18

Ceph模拟物理机down过程及处置方案

本文主要讲述在ceph运行过程中，物理机由于断电等原因突然down掉的情况下集群的表现，以及针对可能出现的状况的相应处理方法 环境介绍 当前我们共有12个OSD，每个OSD用50G硬盘空间，分布在3台宿主机上,同时每台宿主机上还各部署一个monitor。其逻辑拓扑结构与物理拓扑结构如下.... Read More >

2024
12-18

FastDFS分布式存储原理和集群部署

一、分布式文件系统介绍 分布式文件系统：Distributed file system, DFS，又叫做网络文件系统：Network File System。一种允许文件通过网络在多台主机上分享的文件系统，可让多机器上的多用户分享文件和存储空间。 特点：在一个分享的磁盘文件系统中，所有.... Read More >

2024
12-03

Redis 与 MySQL 双写一致性如何保证？

三个经典的缓存模式 一致性就是数据保持一致，在分布式系统中，可以理解为多个节点中数据的值是一致的。 强一致性：这种一致性级别是最符合用户直觉的，它要求系统写入什么，读出来的也会是什么，用户体验好，但实现起来往往对系统的性能影响大 弱一致性：这种一致性级别约束了系统在写入.... Read More >

2024
10-10

[ RabbitMQ ] 重要知识点备忘录

Rabbitmq 集群异常故障处理流程 1. slave 挂掉 当 slave 挂掉之后，除了与 slave 相连的客户端连接全部断开，没有其他影响。 2. master 挂掉 当 master 挂掉之后，会有以下连锁反应： （1）与 master 连接的客户端连接全.... Read More >

2024
09-27

Redis 3.20集群迁移slots槽点丢失key数据

一、问题 redis slots迁移的时候，在迁移之后key数量会变少. 二、排查 2.1、思考 redis 3.x也是比较成熟的产品了，为什么会丢key?别人有没有遇到同样的问题？ 假设丢key了，如果key是因为expire丢失，那应该是正常，如果没有expir.... Read More >

2024
09-18

Linux ulimit 配置说明

ulimit 设置不当经常会引起各种各样的问题，比如很经典的 too many open files，网上也有很多文章讲解 ulimit 设置，如 initscrip 设置、PAM、systemd 的配置等等。 由于 systemd 已经成为主流，本文以 Debian 11 bullseye.... Read More >

2024
09-10

Redis 架构原理02：深入理解redis cluster的failover机制

基础概念 redis cluster是无中心节点P2P的集群架构，内部采用gossip协议传递维护集群的拓扑结构和集群元数据。社区文档地址： https://redis.io/topics/cluster-tutorial failover是redis cluster.... Read More >

2024
09-06

【原创】MySQL远程长连接很短时间就超时夯(hang)住

现象说明 研发说有一台线上服务器（此处称为A服务器)需要远程连接数据库服务器，A服务器上配置了连接池，需要每小时跑一次任务，连接池设置的超时时间是1小时，但是发现如果没有数据传输，不到半小时数据库上的连接就消失了，而A服务器上面的已建立的连接却夯住不动了，无法继续执行sql命令，需要运维查看.... Read More >