程序员：报警快把我折腾疯了
作者：互联网
不羡鸳鸯不羡仙，一行代码调半天。原创：小姐姐味道（微信公众号ID：xjjdog），欢迎分享，转载请保留出处。
本文力求通过故事，来探讨报警的频度和功效。你有没有碰到这样的事情呢？
昨天早晨，接到电话，被臭骂一顿。
一个关键服务，发生了问题。没有人知晓这个事情，造成了响应滞后。领导语中带气：“做的报警系统有个鸟用！什么Promethus？我看就是个狗屁！”
我很委屈。要是服务出了问题，肯定会被提前预知的。于是我翻了报警记录，终于在一大堆报警信息中找到了“报警信息”。
我把截图发了过去，证明自己的清白，但内心还是忐忑的。
这些报警信息，其实是给神看的，给鬼看的。就是不是给人看的。
我的思绪不由得飘向了我的自行车。
时刻警惕
为了锻炼身体，xjjdog入手了一辆美利达山地车。广告费买的，感谢大家的点击，在此请收下我的膝盖。
每天最让人开心的事，就是看别人堵车，笛声长鸣。前不久我还在他们的队伍之中，如今我已经变成局外人。
和我相遇的最多的，变成了公路上形形色色的电动车，还有各式各样的三蹦子。它们横冲直撞，往往吓得我花容失色。
尤其是停车的时候，不小心蹭到周遭的车子，就有一辆，像碰不得的小媳妇一样，尖声叫起来。
一辆车子开始叫，带动附近其他的车子也开始叫，不一会就乱成一锅粥。
这种场景，只有在渡劫时天雷下罚，才能达到这种效果。
我希望有一位勇士站出来，质问我一下，我到底是不是窃格尔瓦，好歹给这些乱叫的报警器一个面子。
可是有更多的人从我旁边目不斜视的走过，无视这种响动。于是我释然，明白了精神领袖为什么能够屡屡得手。
瞎安什么报警器！
报警是有力的武器
为了能够实时掌握系统的状态，对一些异常情况及时响应，报警系统基本上成为了公司内部必备的组件。现在的信息推送渠道非常的多，除了微信、钉钉，还可以发送短信，甚至打电话。
公司刚普及报警系统的时候，大家都很兴奋，感觉所有BUG都会被机器自动解决一样，把希望全部寄托在上面。
想想看，系统的任何波动，都可以被掌控的感觉，就像是宙斯的感觉一样。每天最兴奋的事，就是在扩展显示屏上打开监控界面。看监控数据波动，就像是看股票波动一样让人着迷，着迷于你的判断力得到验证的那一刻。
“把你们的监控群也拉我一下吧！” 领导看了也比较眼馋，想要体验一下报警信息的洗礼。
这当然没问题，成果除了它本身是成果，被领导承认的成果才是真正的成果。毫不犹豫的，领导被拉进了一大堆报警群。
接下来是群成员的噩梦。
领导好像对这些报警特别的感兴趣，也特别的关注系统的稳定性。群里出现一条报警信息，很多会被领导再次截图发到群里，然后@ 某某人：“这是什么问题，赶紧解决一下”。
“CPU的使用超过50%了，有哪位同学能够处理一下”。
“Load报警了 @xjjdog，你赶紧处理一下”。
这种事情多了，报警处理小组不太满意了，有同学和我说，”这领导太耳鼻了，不知道这是正常的波动么“。我私下里向领导反映，这都是比较正常的报警信息，就是一个提示。
”正常的报警信息！”，领导把正常和报警两个词读的很重，“那到底是正常还是异常，你们这个系统做什么用的？”
我唯唯诺诺的退了下来，脑中往事翻腾。
我自然知道将报警分级，聚合，升级，甚至不同级别的报警，通知方式也不太一样。但我还知道另外一点：报警组件，其实是内部斗争的强大武器。
很久之前有一家公司，内部就存在一个拿着报警组件做文章的人。每到了下班时间，或者很多人已经睡下了，他就开始截图一些微不足道的报警信息，发到研发的大群里，并@他想要@的人，督促解决。
这是杀人诛心的行为。
- 如果你不响应，群里很多人会认为你没有责任心
- 如果你认为没影响不回复，群里大多数人认为你没有责任心，长此以往人将不人
- 如果你多次不响应，你的直属领导或者更高领导会被@，但他们往往不懂技术，你就等着电话吧
- 如果你直接回复“正常波动，没影响”，这时候如果正好碰到故障，你将会被大多数人怀疑能力有问题
- 如果你被多次@，脾气不好，回复冲动了，你的形象将一落千丈
你权衡了一下，大多数时候，就只能老老实实的回答：”好的，我看一下“。
温馨提示：看到这个技巧，奉劝你千万不要拿报警组件做文章，否则xjjdog就是个罪人。
泛滥的指标
那么接下来的操作就显而易见了。眼不见心不烦，要么把领导从群里给 T 出去，要么把报警的阈值给调高，甚至别报了。我们选择了后者，因为那些无关紧要的信息，自己看着都眼烦。
就这样，报警群突然间就安静了下来，大家彼此都很满意。
时间的车轮在旋转，部门做完了年度任务，突然间也安静下来，很多人都闲了下来。喝喝茶、划划水，一天就那么过去了。领导看在眼里急在心里。
你忙的热火朝天的时候，领导是没有愧疚感的；但一看到你竟然能够闲下来，大多数领导就开始浑身难受。口口声声结果导向，但一看你的过程舒舒服服的，就觉得你的目标定的太低。
领导对报警组件提出了质疑：“我听说把很多报警的指标都给去掉了，这怎么可以。系统的隐患要及时暴露出来，提前消灭掉！”
领导给定下指标，每台机器，每个业务系统，必须凑够100个监控项，把系统无死角的监控起来。
就像巨石落进水潭，盘活了沉睡的码农，恢复了往日的忙碌。无数的报警群被创建开来，信息从早到晚响个不停。大伙儿目光呆滞的盯着屏幕，或者直接将几百条未读短信批量置成已读。
这里要再看一下电动车报警器了。在某宝上一搜，产品有很多个，卖的也不错。但，这有个鸟用。
报警信息泛滥，和没有报警的效果是一样的。你的报警器就是喊破喉咙，也没人多看你的爱车一眼，因为我们早已经麻木了。
真正的报警信息，被淹没在无效报警的海洋里。系统的隐患，就这样慢慢开始腐烂，无人问津。
End
这个问题肯定是要解决的。福报来了。痛定思痛，会议确定了以下内容：
- 加大报警组件建设的投入力度，确保报警经过了严格的分级
- 所有报警信息，无论影响大小，全部需要给出处理意见，落实到人
- 每天早会对报警信息进行盘点，规范处方式
- 每周总结报警的条数、影响、改进，持续优化
我觉得这样的安排没有破绽，能够打造一支一流的队伍，你觉得呢?
“只要蛮力大，我们就不惧方法的对错！” 领导的名言貌似很有道理。
作者简介：小姐姐味道 (xjjdog)，一个不允许程序员走弯路的公众号。聚焦基础架构和Linux。十年架构，日百亿流量，与你探讨高并发世界，给你不一样的味道。我的个人微信xjjdog0，欢迎添加好友，进一步交流。
标签：群里,xjjdog,报警,领导,信息,程序员,折腾,组件 来源： https://blog.51cto.com/u_14355948/2709483