地下室的故事

预先通知:该帖子严格来说是星期五的帖子,比技术性更有趣。您会发现有关fakapah工程的有趣故事,蜂窝运营商工作的黑暗面中的故事以及其他轻浮的沙沙声。如果我在某处修饰某物,那只是为了该类型的好事,而如果我在说谎,那么所有这些都是几天来的工作,以至于不会伤害任何人。但是,如果您有技术眼或其他方面的意见,请无情地纠正我,我一直站在正义的一边。



注意,我没有超频就开始!



后院到院子里



我们一楼的值班室从地下室到天花板几乎都有大窗户。他们来到服务停车场,早晨,各种仪表和其他现场工作人员从那里出发。停车场与前面和所有服务入口之间的距离足够远,甚至在两个障碍物后面也是如此。



一天早上,警车驶上大楼,警察在所有检查站站起来,检查所有离开的人。警报到达服务邮件列表:突然(真的是突然,并非像往常一样)出现了对许可软件的检查,他们将检查工作站。任何在计算机上拥有海盗物品的人都必须拆除它!



当然,与操作系统,办公软件和实用程序软件相关的所有内容均已获得许可。但是,并非一切,并非总是如此,也不是无处不在。员工在办公笔记本电脑上指示自己的事情完全是个黑暗故事。我赶紧检查了盗版责任区中的汽车,迅速拆除了一些东西......



这时,带着手提电脑和系统工程师的工程师开始匆忙而紧张地进入值班室。他们穿过大门进入,离开,在窗外嘲笑局势的荒谬之处:他们封锁了所有检查站,但法治魔鬼没有想到这样的后门。因此,在会计部门进行检查时(一切都堪称典范),员工们撤出了一切。



过去在那里



如果您有兴趣并且尚未关闭选项卡,则可以了解一下时间,空间和人员正在发生的事情。我是位年轻漂亮的年轻人,绿色如as浆草,是IT毕业生,曾在Samara Megafon(当时也是MSS伏尔加河地区)当值工程师。对我来说,这是第一次与Technics进行真正的接触,使用大写字母,然后使用Technicians进行了更大的接触:作为这间地狱厨房中最年轻的小鬼,我很高兴地看到了经验丰富的魔鬼工程师的工作,但他们未能理解他们的智慧。直到那种智慧渗透到大脑的毛孔里,我才只能钻研一堆不同的显示器,每次在那里出现“红色”时都会担心。







如果此处提到的角色之一突然认出自己-您好!



可行-请勿触摸(如果不触摸,请触摸)



上述超级技术之一是Misha Basov。在Mega的多年工作中,我本着他几乎是起源并发起了一系列流程的精神,听到了许多关于他的好事和有趣的事情。我没有设法与他进行适当的沟通:当我带来文件时,我们确实是在人事部门见面的,然后他拿走了文件。



我们与之合作的监控系统之一是由Misha编写的。我真的不记得那里监视的内容,但是我知道Misha编写了一个临时解决方案,该解决方案很快成为永久性的。很好:很多真正的技术人员匆忙地满足自己的需求,结果还不错。这种监视也适合所有人,无需任何支持和维护即可工作,但是没人知道如何做到。



Misha被解雇几年后,监控开始显示空白页。

我立即发出警报。班长发出警报。部门负责人发出了警报。



部门负责人发出了警报。服务的负责人发出了警报。部门负责人叮叮当当。整个伏尔加河地区的IT主管都听到了这个电话,并立即召开了会议。他在那里叫部门主管。后者咆哮于服务部门的负责人。他不了解问题的实质,就叫部门主管。这位不了解发生了什么的人叫部门负责人,叫值班主管。好吧,他把箭对准了我。



由于某种原因离职后,我参加了这次会议。有人说了很多话,负责监视的人被叫来(我们听不到任何可理解的信息),回想起监视Basov写道监视非常重要,但是没有人了解也不知道监视的工作原理……所有这些都归结为以下事实:应该删除无法正常工作且难以理解的系统,而应该实施来自受信任供应商的可靠解决方案。

虽然说了所有这些,但我要求某人提供一台笔记本电脑并通过SSH方式访问该服务器。看到传说中的巴索夫写了什么样的超酷系统对我来说很有趣。



我进去,首先是出于键入的习惯:



df -h


该命令将回答如下:



Filesystem      Size  Used Avail Use% Mounted on
/var            10G   10G  0G    100% /


我清理了多年来已溢出的/ var / log,更新了监视-一切正常。修好了!

会议停止,皱巴巴,所有人离开。在此过程中,部门负责人很高兴并向我承诺奖金!..



...除了获得奖金以外,我还收到了一个念头,原因是我不小心中断了回滚以便从可信赖的供应商那里订购监控系统。



房子住在哪里



值班工程师的职责之一是控制进入计算机室的电子钥匙。大厅本身给我留下了深刻的印象:排成排的架子上挤满了服务器和交换设备,光纤线路和交叉电缆(某个地方-完美地放置在某个地方-变成了令人难以置信的意大利面条),空调箱的嗡嗡声和地板下面的假地板这使得冷却饮料变得非常方便。大厅的入口都用沉重的加压门密封,旨在在发生火灾时自动封锁。严格记录出入是否有签名,以便知道谁在里面以及为什么。



我最喜欢这些大厅中的大多数,当然,我喜欢“超级房子”的服务器机柜-两个HP SuperDome 9000,可确保计费工作。两个相同的节点,一个始终是战斗节点,另一个始终是同步热备用。它们之间的区别仅在于IP地址,一个是xxx45,另一个是xxx46。所有工程师都知道这两个IP,因为如果计费系统发生问题,首先要做的就是查看超级房子是否可见。超级房子的隐身-akhtung。



一天早晨,类似的Achtung发生了。两秒钟之内,所有服务都在两台服务器上消失,计费崩溃成零。我们会快速检查服务器-它们会做出响应,但实际上没有任何内容!



当我们听到大声的喊叫“杀,学生! ”时,我们甚至没有时间开始采取一系列措施“;所有服务器的档案管理员进入值班室,将涡轮机大厅的电子钥匙从架子上扯下来,然后在那里运行。



此后,监控很快恢复正常。



这就是发生的情况:承包商的新员工配置了一堆新的虚拟机,并用笔给他们写了顺序的静态IP地址,从xxx1到xxx100。“学生”不知道神圣不可触及的地址,而且老朋友从来没有想到有人会这样侵犯他们。



服务“反垃圾邮件”



哇,夜班!我爱他们,却恨他们,因为那是50/50:要么计划在设备上进行工作,要么积极参与其中,帮助工程师用困的大脑和颤抖的手,或者安静地静默。订户正在睡着,设备正在工作,什么都没有中断,服务员很放松。





手表按计划进行。



办公电话打扰到这种午夜的平静之后:您好,他们担心Sberbank,您的SIM卡已停止与我们合作,并通过其发送通知。



毕竟,这是很久以前,甚至还没有为SMS网关引入IP连接。因此,为了使Sberbank能够从其著名的号码900发送SMS,他们将提供的SIM卡(很可能是一个,甚至没有一个)插入SIM卡中,因此工作了。



好的,我接受了这个问题并开始研究。首先,我在帐单中检查SIM卡的状态,该卡已被阻止。怎么了-红色铭文“请勿阻塞”旁边以及指向一般archdemon命令的链接。哇,真有趣。



我检查了阻塞的原因,让我的眉毛成为房子,然后前往下一个办公室,欺诈部门的一个女孩正盯着显示器。



我告诉她:“伦诺奇卡,你为什么阻止Sberbank?”



她很困惑:他们说投诉是900号垃圾邮件。好吧,我挡住了它,早上我们会想出来的。



而您说-订户投诉将被忽略!



当然,Simka被打开了。



一个非常恐怖的故事



当我第一次找到工作时,我和其他新来者得到了一次观光旅游。显示的设备:服务器,管道,逆变器,灭火。他们展示了位于其中一间测试室中的基站,并解释说,尽管发射机以最小的功率打开,但最好此时不要进入屏蔽门。他们解释了有关移动网络的设备,主要和备用电源,容错性以及有关网络即使在原子弹轰炸后仍可正常工作的事实。我不知道这是说是一个通俗的说法,还是真的,但它被保存在我的脑海中。



的确如此:无论何时在当地发生什么问题,伏尔加河语音网络一直都在持续工作。我不是通信运营商,但是我知道设备(基站和客户端)都是为了最大程度地保留“语音”而设计的。 BS的电源是否断开?它将减少功率,切换至柴油发电机组/电池,关闭数据包流量的传输,但声音会消失。剪断电缆?基地将切换到无线电频道,足以进行语音通话。丢失了手机BS?它将增加功率并会感觉到以太,直到它钩在塔上(或直到跌落电池)。等等。



但是有一天,办公室里一盏灯闪烁着,柴油发电机在街上嘎嘎作响。每个人都急着要仔细检查他们的硬件:IT部门没有发生任何关键事件,但是BS监视产生了一个令人困惑的“问题”。然后:“伙计们,我们已确定所有基地,请检查连接。”

我们拿出手机-没有信号。



尝试IP电话-移动通信无​​路可走。



没有网络。通常。无处。



记住关于原子弹轰炸的话,我下意识地等待了几秒钟,直到冲击波袭击了我们-出于某种原因,我没有想到失去网络的另一个原因。同时又令人恐惧和好奇:我以某种方式理解我将没有时间无所事事。其余的人也吃了一惊,没人能理解。



没有爆炸声。经过五秒钟的震惊之后,他们赶到了适用于这种情况的有线城市网络电话,开始打电话给地区办事处。幸运的是,城市网络正常运行,但在该地区已得到证实:整个萨马拉(Samara)是“死路”,没有硬件ping,没有拨号。



五分钟后,一位电力工程师带来了一个消息:发电厂的某个地方发生了爆炸,至少整个萨马拉地区(可能是整个地区)都断电了。呼气 当有备用电源的开关时,他们甚至呼吸了。



另一个可怕(但有点愚蠢)的故事



我记忆中最大的混蛋发生在下一条直线,现在为零。当时,他们正在引入一种通过SMS发送问题的技巧,因此他们预先为网络上的负载激增做好了准备:重新检查并准备好一切,并且在第X天的整个一周内,除紧急工作外,任何工作都被禁止。在预期增加的负载的任何情况下(例如,假日)都使用类似的协议。对于值班的工程师来说,这就像放假一天,因为如果不触摸设备,则什么也不会发生,即使这样做,所有专家也将事先坐在办公室以防万一。



总的来说,我们坐下来听国家领导人的讲话,什么都不担心。



从换向器的侧面,听到一个安静的“ F *** t”。



我看着自己-真的是“ f ***”:校园网络掉线了。



在一秒钟之内,一切都消亡了(那时关于娜塔莎和猫的模因还没有,但是会派上用场的)。网络的用户部分消失了,技术部分消失了。随着恐惧的加剧,我们正在尝试检查剩余的工作情况,然后检查之后,我们到达隐藏的一瓶药用白兰地瓶后面的柜子:只剩下语音通话(正如我所说,它们很顽强!),其他所有东西都死了。没有互联网-没有订户GPRS,也没有光纤,这已分配给几个子提供商。短信未发送。屁股!我们称这些地区-他们有网络,但看不到萨马拉。



在一个半小时内,世界的尽头变得几乎有形。有一千万人突然中断了一切,无法到达呼叫中心,因为呼叫中心中的语音终端通过VOIP运行。



而这是在最黑暗的统治者讲话时!国务院和奥巴马本人的又一次胜利!



值班人员从一开始就爆棚,工作起来非常清晰:一个小时之内,网络就变得活跃起来。



这样的飞行不是区域性的,甚至不是区域性的,都应向莫斯科报告,并附上所有细节和引渡负责人。因此,禁止那些参与调查的人说出解雇之痛的真相,而他们为GO编写了一份充满水和雾的报告,据此,它以某种方式证明“这是它本身,没有人应受责备”。



现实中发生的事情:其中一位酋长规定了实施的最后期限,因此他们的奖金被取消了。酋长被打断了,等等。因此他们压迫了一位新工程师,命令他“在一切安静的时候”建立所需的网络连接。工程师不敢反对,或者至少要求书面命令:这是他的第一个错误。第二个-他在远程配置tsiska时犯了一个错误,在最短的时间内在fakap上获得了记录结果。



据我所知,没有人受到惩罚。



假期来了



正如我所说,假期一直是我们的特殊日子。在这样的日子里,网络上的负载急剧增加,祝贺电话和SMS的数量超出规模。我不知道现在随着互联网通信的发展而变化,但是仅在新年期间,opsos就打招呼打出了非常明显的泡沫。



因此,在除夕夜,所有部门的工程师都在办公室值班(在办公室外,有团队准备挤过雪堆,以消除在Malye Drishchi村基站的事故)。计费专家,硬件管理员,软件管道工,网络人员,交换机,服务技术人员,承包商支持-每个生物都有一个生物。如果条件允许,他们就会在我们的值班室闲逛,在我们的监控设备上观察伏尔加河整个时区的交通流量。



但是,我们庆祝新年的夜晚是三四次,但这并不是节日般的令人紧张的期望:设备是否能承受过载,复杂的技术链中的某些环节会破裂...







负责计费的Sasha特别紧张。原则上,他总是看起来一生都在专心致志,因为他不得不收拾账单上的所有好处,对所有的门框负责,他在夜间比其他人被唤醒的频率更高;总的来说,我不知道他在哪里工作以及如何工作。也许他赚了很多钱,或者家人被扣为人质。但是那天晚上,我通常有一种感觉,如果用指甲点击萨莎,那么从累积在他身上的内在张力,他会崩溃成尘土。对于这种不愉快的情况,我们要用扫帚,但与此同时,我们要努力工作,在等待的白兰地上舔嘴唇。



一小时又一小时,所有负载爆发都过去了,每个人都开始重新检查他们的系统。交换机变苍白:在其中一个区域交换机上,所有计费流量都消失了。这是通过交换机传递的所有呼叫的数据;它们被写入文件,该文件通过FTP(kondovo,但可靠)被下载到BRT进行计费。



换向者,想象着他将为整个地区损失新年收益的一部分而得到多少松节油灌肠,这已经颤抖了。转向萨莎(Sasha),他以充满希望的声音求助于这位出色的先生计费专家:“萨莎(Sasha),请看,也许BRT设法降低了关税?哦,拜托!”



萨莎喝了一口白兰地,用鱼子酱三明治吃了一下,慢慢地嚼着,由于关节不在身边而高兴地翻了个白眼,回答:“我已经检查过了,没有文件……”。



(我出色的校对员后来问这可怜的总机怎么了。哦,他的命运很糟糕:他在呼叫中心的第一线支持下被判处一周的工作,禁止发誓。Brrrr!)



扔一块无罪的石头



从这些故事中,可能会给人一种印象,就是我本人和其他值班服务员都没有搞砸。没有什么,fakapili,但是某种程度上没有有趣的史诗和后果。这项工作被认为适合没有头脑和经验的昨天的学生,没有什么可以从这样的员工那里拿出来参加联合的活动-因此,新的想法不会变得更聪明。但是工程师有一个单独的运动纪律,将门框扔到“值班室”:他们错过了,他们没有弄清楚,他们没有及时得到通知,所以要惩罚他们。 “ Dzhurka”完美地掌握了闪避技术,但并非总能奏效,但每个人都能理解。因此,它飞入了-但通常不会造成严重后果。





我们分析变化中的下一个“飞行”。



在那儿工作了几年,我记得三个人被部门开除的案例。

工程师决定在夜班里喝啤酒,然后技术总监来到值班室。有时他可以这样简单地打个招呼打招呼(有点像他从服务员开始)。用一罐啤酒解雇了一个人,点击了电话,解雇了。晚上我们不喝啤酒了。



还有一次,值班总机人员错过了一些非常可怕的事故。我不记得细节了。



第三次-在我的工作结束时。工作条件下降很多,营业额大为增加,而且过度劳累。有时人们工作一天,然后入睡12个小时,然后再次进行日常观察。只要我的健康得到了报酬,我本人就是这样工作的。然后他们几乎停止支付加班费(作为一种标准,他们承诺在有机会的情况下请假,但每个人都知道没有人会去散散步),他们几乎是在威胁下被赶出岗。一位工程师不能忍受杜鹃,他在值班中途从工作场所站起来,永远回家,途中向服务负责人的办公室望去,并给他寄了三封信。我记得一个邮件列表,其中的事实是该工程师被冠以法西斯主义者和叛徒的烙印,在每一行中,人们都读到了这种行为是如何烧毁当局的。



关于我的个人fakups,一个案例因其不寻常而被记住。再一次,守夜,一切都安静了,什么也没有发生。在班次变更时,我们检查监视情况:哎呀,来自交换机的数据处理在晚上掉了下来,红灯亮了很长时间。我整夜都在看这个信号-没察觉到它什么。尽管它是最明显和直观的监视之一,但我仍然不明白为什么我没有看到它。

没有任何借口可以坚持,关节很干净,百分之一百,是第五类事故,很可能被解雇。经过十二个小时的夜间工作直到午餐时间,我被迫写了说明性笔记。由于没有人会相信真相,我不得不想出一种of语,由于受伤,我吞下了止痛药并入睡了。服务负责人在他的办公室大吼大叫,总的来说,一切都将被解雇,但遭到了谴责,被开除。到那时为止,在Mega中所获奖项已经有好几年了,所以我没有受到任何损害。



记得随着techdir的到来而发生的那件事:有一天晚上,一些乡下人走进值班室,开始大喊我们坐在那儿(原则上不应该把值班室锁上),我们在这里驯鹿,到了早上,他对我们所有人都充满了期待。有关我们所有门框的说明。那个乡下人是安全部门的负责人,而且很痛。尖叫后,那赫比兹人陷入了黑暗。早上,我们问我们的老板-他们说,该怎么办?他回答说:“操他,送他。”那件事就此结束。



我如何打破部门



在那些日子里,Bashorg(当时仍然是bash.org.ru,而不是现在的地方)是一种崇拜资源。那里的行情几乎每个月出现一次,而且有您自己的!报价!在基础上!就像2000年您的二级域名一样酷。尽管Bashorg对每个人都很有趣,但是Bashorg还是某种IT动画。



最年轻的工程师(即我的)的每个工作早晨都从阅读bashorg开始-在遭受十二个小时的苦难之前发出三十秒钟的笑声。



有一天,一位同事问我在笑什么。我给他看了什么。他将链接发送到部门。



工作停止了几天:令我惊讶的是,直到那一刻,我的同事们都不了解bash。值班室里笑了起来:“啊哈哈哈哈,补丁KDE,啊哈哈哈哈!” “ Yogo-ho-ho,淹死了水银撬棍,赛跑者!” 失去了工作日,另一方面,生命又显着延长了。



对于那些阅读它的人来说是奖金



请记住,在胡须时期,有一个如此流行的轶事“我想在诺顿看到两个C盘-为什么我需要两个?好吧,我擦除了一个!” 这使我想起了我最喜欢的一个故事,不是我讲的,而是我讲的。每次都很有趣,就像第一个一样:



18岁以上,但您无法删除歌曲中的单词


压力



这些故事是我TG频道中一些帖子的经过处理的汇编。有时候,类似的游戏也会在那儿溜走。我没有任何暗示,但我仍然会引用



祝大家星期五过得愉快!



All Articles