重大故障通报
客户:金华婺城调味有限公司
通报人:李娜
客户对接:仓储主管周敏
日期:0000-00-00
结论:已恢复,中断 2 小时 10 分,库存与备份一致
一、通报结论
9月16日 14:20 至 16:30,婺城调味三个仓库无法开出库单,中断 2 小时 10 分。16:30 开单恢复。当天下午约 180 笔出库在恢复后补开完毕。9月17日抽查 50 条库存,与故障前备份一致。本合同为专业版三个仓库,年费与实施合计 132,000 元,8月已签约并到账。
本通报发给周敏,并抄送总经理办公室。后续导出方式的变更由李娜在 10月10日单独说明。
二、影响范围
- 金华中央仓、义乌仓、兰溪仓三个仓库在 14:20 之后都不能新开出库单。
- 已经开出的出库单可以查询,库存数量在故障期间没有被改写。
- 财务凭证导出在 14:00 开始,占住了开单所用的数据库连接。
- 补开的 180 笔全部记在 9月16日,周敏 17:40 确认补开队列清空。
三、处理过程
四、原因与处置
9月16日 14:00 财务导出近三个月凭证,导出任务把数据库连接占满,开单请求排不上队。何倩 16:30 将导出并发限制为 2 路,开单连接与导出分开。9月18日加上告警:连接使用率达到 80% 时,李娜和何倩同时收到通知。
10月10日上线只读导出。此后凭证导出走只读连接,不再占用开单连接。周敏和财务吴倩在 10月11日用只读导出重导 9月凭证,抽 20 张与用友核对税额。
五、后续动作
- 10月10日前完成只读导出,何倩负责,李娜当天告诉周敏启用时间。
- 10月11日吴倩重导 9月凭证并抽 20 张。有差异当天回复李娜。
- 连接使用率告警保留。达到 80% 时,何倩在 30 分钟内查看导出任务。
- 月结导出改到 18:00 之后,由吴倩执行。工作日 14:00 至 17:00 只导出当天要用的短表。