运维与数据工程笔记

运维实测

PVE / HAProxy / 批处理作业:有数字、有故障、有对照实验

断点续跑的批处理:三个可复用的运维模式
长跑批处理任务失败后从头重来,是运维里最常见的时间浪费。三个模式——审计日志无停机轮转、时间分片加多维账本、健康度选活加断点续跑——共用一套内核:原子写账本、文件锁、时间窗判定。
MongoDB 副本集单入口:用 HAProxy 做协议感知健康检查
HAProxy 默认的 TCP 检查会把 secondary 也判为健康,客户端连上去读到过期数据。用 tcp-check 手写 OP_QUERY ismaster 报文做协议级探测 + on-marked-down shutdown-sessions,切主时旧连接 4 秒内被断开,而不是带着降级连接跑十几秒。
给自装系统开启 Cloud-Init:PVE 模板化的完整链路
自装 Linux 想被 PVE 当模板克隆,必须完成通用化(清 machine-id 两个文件、删 SSH 主机密钥)、挂 Cloud-Init 驱动器、设 ciuser 三步;漏掉任何一步,克隆出来的机器要么主机名重复,要么 SSH 登不进。