A JOURNEY IN WORDS

写下的，都是走过的路.

代码之外，留一点时间记录。这里存放着每一次思考与实践。

2024

04.19一个慢接口引发的雪崩：Dubbo 超时 + 默认重试，把流量放大了 3 倍

03.23XXL-JOB 的三种“灵异现象”：重复执行、莫名不触发、执行器离线——一次讲透调度链路

02.24ES 写入全线 403：磁盘刚到 95%，整个集群就“只读”了——水位线三兄弟与 read_only_allow_delete

01.29下游慢 2 秒，上游全挂：一次线程池被打满的连环追尾 01.06接口“偶发”卡 3 秒？它其实很准时：一次 Full GC 频繁的追凶记

2023

12.18导出 50 万行报表，堆直接原地去世：一次 OOM 的 dump 分析与流式改造

11.21堆明明没满，容器却被 OOMKilled：一个 ByteBuf 忘了 release 的堆外内存漏洞 11.02不重启、不改代码：用 Arthas 现场揪出“偶发 3 秒”的那一次调用

10.11应用“假死”：CPU 2%，请求全挂，jstack 一眼看出两个线程在互相“谦让”

09.26CPU 飙到 800%：一条“无辜”的正则，把 8 核机器吃得只剩渣 09.12月初报税高峰，热点 key 同时“下班”：缓存击穿把 MySQL 打成了 PPT

08.17明明建了索引，SQL 却跑成了全表扫描：隐式转换、函数包裹与字符集的“四连暗杀”

07.25“Deadlock found when trying to get lock”：两个事务互相谦让，谁也没让成 07.09给大表加一个字段，整站查询全卡死：一个“睡着”的事务与 Waiting for table metadata lock

06.17分布式锁“锁了个寂寞”：任务跑得比锁久，两台机器同时扣了一笔款

05.26刚下的单，转头就查不到：读写分离、主从延迟与那个 500 万行的 DELETE 05.07HikariPool-1 - Connection is not available：连接池被“借了不还”的事务掏空了

04.11Redis 隔几分钟“抽风”一次：一个 200 万字段的 Hash，拖着全公司业务一起卡

02.18“怎么还没收到短信？”RocketMQ 堆了 300 万条消息，我从 Diff Total 一路追到一个死循环重试

01.20用户收到两条短信，另一位用户的扣款却“查无此消息”：MQ 重复与丢失的双面案件

2022

12.24RabbitMQ 的 Unacked 越攒越多，连接还被 blocked 了：一条忘了 ack 的消息引发的血案

11.26Java 搬进 Docker 就“水土不服”：容器 2G 内存，JVM 却以为自己有 64G 11.04挂载目录 Permission denied 及两个“难兄难弟”：时区差 8 小时、改了代码镜像纹丝不动

09.25容器每 40 秒“重生”一次：Restarting、exit 137 与一场 restart always 引发的重启风暴

08.30根分区 100%：一个没配 max-size 的 json.log，把 200G 磁盘“吃”成了 0 字节 08.15容器里 curl localhost 永远拒绝连接：Docker 网络的五个经典“不通”与 ufw 那个著名的坑

07.25服务器 CPU 100%，罪魁是个名字很奇怪的进程：一次挖矿木马应急响应

06.28Java 进程“人间蒸发”：没有 hs_err、没有 OOM 异常，凶手是 Linux 的 OOM Killer 06.09load average 飙到 60，CPU 却在摸鱼：一场由 D 状态进程引发的“假繁忙”

05.12Too many open files：一个没关的 HttpClient，攒出了三万个 CLOSE_WAIT