基建很棒，基建狂魔更棒。

但是有一个小问题，基建是要掏钱维护的。

好事，广东ip的键盘瞎们终于能消停一天了。

什么？不是断网？

可惜了。

所以，现在的团建热点话题转移到基建上面来啦？

由于运营商交通补贴停发，抢修人员才刚刚步行到抢修地点

我猜个原因，最近体制内各种裁员，国企也掀起了裁员潮，炒掉了外包团队、劳务派遣、正式员工中没背景的，而恰恰真正干活的就是这批人，虽然领导可以让养尊处优的关系户接手，但维护能力、出问题后解决问题的能力会不会下降。

听说美国某州政府裁掉一批消防队员后，火灾发生概率大幅度提高，部分消防队员化身放火分子。

老外裁员，都是裁高管，裁掉一个可以雇很多下面干活的，所以我们以前开玩笑：总裁总裁，总是被裁的那个

国内裁员，裁干活的，呵呵，总经理来给大家表演下爬竿儿修啊

北京电信的，这事儿已经在总部炸了，领导全蒙了，现在技术部的在打电话

昨天下午一出这事就知道是核心网出问题了，现象很清晰，数据流量和固网没受影响，广东的移网号码出省了也受了影响，外地的号码在广东没问题，这显然和上次湖南的全阻不一样。我看官方说是光缆挖断了根本就不信。

奇怪的是为什么会在下午出问题，按道理这个时段不会安排割接之类的操作。

今天早上说是思科的设备问题。

坐等几年后有人回答:本来是打算屏蔽考场附近的通讯的，结果手一滑误将配置下发到全省是种什么样的体验

我只知道会有什么赔偿？

哦，央企啊

我都道歉了你们还想怎样。

要我说，最根本的原因就是：上班吹空调的太多了，真正做实事的太少了或者工资太低了。

没什么好看的，官方公布的原因比较合理了。2G信号废除后，思科交换机引发的。官方的话是：故障为LDA到HDA之间链路拥塞 。而之前电信升级废除2G信号。思科的机制是跑不通其他信号就跑2G，结果没有了2G，于是数据包重传异常后使用广播，形成广播风暴。

大面积无法使用 ，那基本和无线电管制，屏蔽无关喽，一般是运维核心网HLR用户数据问题，HLR存储用户的合法信息，出问题后合法用户因为鉴权失败而被误认为非法用户造成大面积无法使用喽，至于下一步无非是八股文，在某某领导的现场指挥下，指导下，批示下，找个替罪羊，如农民工挖断光缆，临时工不听领导英明指示非法操作。大气突发导频污染，俄乌战争导致卫星时钟数据不同步，最后是皆大欢喜，都是厂家的问题。以后一定要举一反三，争取更大的胜利，最大的收益回馈广大股东，减效增益，等等。

国内各行各业都怕担责，宁愿不做事也怕出意外，我工作附近有家长安深蓝售后中心，平常没事看看他们修车，有次有辆深蓝sl03空调压缩机不工作，厂家来了个工程师帮忙排查，先都各种打电话咨询检查方法 ，最后售后维修师傅发现保鲜盒里的保险丝烧了。就咨询工程师换上备用保险丝，明显能看出保险丝被烧痕迹 ，骚操作来了。厂家人员开始给原先咨询的那些人打电话说好像是保险丝坏了，替换备用的行不行，电话里面一听这怕担责，你推我他推他说问这个问那个可不可以 ，最后两个人说到一起了 都说问对方，没办法尴尬一笑 只能说替换试试看吧，

结果就是 备用保险换好空调压缩机就能启动了，工程师还把被烧的保险带走了 真的当时就感觉这么大的一个车企 没点责任感的

大环境如此 迟早要丸辣

厉害了，这么多回答，官方回复还没出来，就开始不是攻击g企，就是攻击华为。

--------------------------------------------------------

一旦有人说可能是思科的问题，

立马有人跟上说现在没买思科了，不可能是思科的问题。

--------------------------------------------------------

就我所知，之前买的思科，没拆。

我觉得这就是一种自信

一家给全省数千万甚至上亿用户提供网络和通讯服务的公司。

网络和通讯直接不可用。

花了几个小时才恢复。

现在故障恢复了，要开分锅大会了

分锅嘛，总得是利益相关方才能背这口大锅，你总不能让秦始皇背锅吧。

分锅的都有谁？事故发生在现网，运维跑不掉；和硬件相关地事故，供应商跑不掉；几个小时都没恢复，说明容灾设计有问题，架构师跑不掉；社会影响不好，公关团队跑不掉；不知道诱因是什么，如果是变更引发，变更执行人跑不掉，审批变更的领导跑不掉；如果是设备质量问题，采购设备的兄弟也跑不掉；如果是当初建机房搭环境的步骤有问题，当年安装部署的兄弟也跑不掉。当然了，为了展示负责任有担当的形象，各位领导也会象征性地与会自责一下。这么一长串名单，利益相关方可能有好几十个，全省规模涉及的具体人员说上千都是少的。

这么多相关方，这么大个事故，这个分锅大会把人喊齐都得两天。

看看这个下面的回答？6月8号14点出的事故，事故发生一天不到，神通广大的“匿名用户”已经从“好哥们”那里知道了“出事故的设备是华为/中兴的，还打算甩锅给思科”。并且已经开始反思“裁员太多，领导结构复杂”===>“国产的设备就是垃圾”===>“都是大基建惹的祸”。

绝活儿，都是绝活儿，“好哥们”这么牛逼为啥要在小小广东电信混日子，这么强的定位能力不去俄乌战场排雷都是对人道主义的亵渎，下次枪战片你不当狙击手我不看嗷！

--------------------------------手动分隔符--------------------------------

说认真的，这回这个事故，除非是有人搞变更导致的，否则运维这一锅是背定了。

不说问题根因，全省规模的网络和通讯中断，花好几个小时才恢复，在此之前甚至连部分恢复都做不到，说明容灾能力严重不足。但凡有一点容灾能力，也可以先恢复一部分区域或者一部分用户的业务。要么是出问题的阶段完全没有容灾手段或预案，要么是运维团队对容灾方案完全不熟悉，这两种情况运维都是一锅。

反倒是硬件供应商，几乎是最不可能全责的：

如果是转维了很长时间的设备，非峰值期间出现这种规模的故障，基本是由于不合规使用导致，供应商最多是自动容灾做的不到位，背全锅就太扯了。

如果是新转维的设备，你电信上新设备都不搞备份不搞容灾？供应商的设备上线前不测试？全省挂掉，要么是核心节点要么是通用方案，核心节点你不搞备份？通用方案你不搞试点？供应商给你啥你都敢上现网，那直接让供应商来当广东电信不就得了？

供应商倒确实可以分个二锅或者三锅，只不过这种重大事故对口碑打击太大，钱不到位很难让供应商闭嘴。想甩锅给第三方可不是那么简单的，人家也有嘴的。

当然了，如果真的是由于所谓的“供应商提供的硬件有后门”，那当我没说，让国安介入调查就完事了。

运营商现在天天降本增效，网络部门在里面算是被嫌弃的只花钱不赚钱的部门，政企市场才是对公司有用的。领导不重视搞技术的，只重视ppt科技，还各种砍维护费用，来一次重大故障领导也可以清醒一下

看了很多评论，大致的意思就是人在外省但是卡是广东的也是受影响，人在广东省内但是卡是外省卡是不受影响的。如果是设备问题应该是在广东省内所有省份的卡都出问题才对，不可能只针对广东省内开的卡，那么肯定就是数据库问题。

怀疑是不是内鬼在偷数据的时候失误操作导致的，不然我们用实名认证的号码怎么被人知道的？MD才登记几天的卡我自己都还记不住号码，家里人都不知道的号码，就被别人精准的知道了。

放心，这不是什么问题，因为很快就不会有这个问题。

过一段时间，就会出现大量的账号发言说：“我也是广东电信用户之一，我怎么一直可以打电话？” “你们肯定是移动派出来造谣的！” “你们肯定收了中兴的钱，黑华为的基站设施！”

就好像现在某些未知群体说“疫情三年，我怎么没被封控？” “我和我身边都没有被封控，我还到处去玩。”“ 你们这些说被封控的都是境外势力，都是罕见网军。”

抱歉啊大家，降本增笑了

事故原因并不重要，电信运维的底线逻辑就是凡事都会出错，所以数据和设备都要有备份，有冗余。所有操作都能回退，都能恢复，平时都要演练。

所以查明直接原因固然重要。但最大的问号，是为什么恢复时间那么久。这样一查，就不是什么临时工的事情了。

应该和动物保护有关。

我猜是一只麻雀不小心落在了广东的某一条电线上，

然后广东省领导为了保护麻雀，立刻下令用飞机撞毁了广东电信总电话线。

所以就打不了电话了。

各种问题下面也有团建我是没想到的，还有扯到裁员上的，看来裁员后是不会重新招人的，哦，你说新招的工作经验和能力欠缺，别问，问就是裁35岁，可我寻思着很多公司35岁以上的员工一抓一大把，而且资深运维工程师是你想裁就裁的？

我查了一下，这种事情以前好像发生过不少次？2017年、2018年移动就崩溃过，去年前年也有，到2023年竟然还有，我看破锅药丸 。

业内员工路过

我不太理解第一为啥会断，第二为啥会抢修那么久

这故障一看就是核心网的问题

单点故障要么应该自动触发倒换

要么发现了直接手动触发倒换就行

真逼急了直接整机复位，强制把用户倒换到备机也可以啊

目前网传是承载网的思科设备拥塞了，我们也有过类似的问题，核心网到城域网拥塞，用户上网受影响，也没自动触发倒换

当时直接手动关端口，强制切换就完事，整个故障历时差不多1个小时

不太清楚友商的3小时是怎么整出来的

通信行业现在有两个问题

一是运维成本和运维人员都压缩非常严重，整体建设、运维质量逐年劣化

利润率的压力已经突破了网络安全的红线

现在就是不出事就年年砍成本，每年都要比上一年少

出了事就是大事

这次幸好没有爆出什么通信故障导致恶性事故的情况，要不然问题更大

二是概念叫的震天响，实际水平从没检验过

这点大家都一个屌样，运营商、设备商、互联网公司都一样

之前知乎有个问题说怎么能同时瘫痪淘宝的所有服务

答案吹的是震天响，什么四地热备份，要全国沦陷才行

结果3月29号，电信一个机房挂了，腾讯、唯品会双双沦陷

腾讯好歹和阿里一个水平，异地热备份呢？死机了？

别以为运营商异地备份能做多好

核心网组pool、云化、SDN概念一堆

我所在的一线城市，只需要炸一个机楼，保证至少半个城市没信号

说实话，我相信友商的水平大概率还不如我们

假设你是老板，

你手下的员工中有25%，30%甚至40%的员工，每天无所事事，喝茶，养生，看小说电影电视剧。

你想不想不再养他们了，干掉他们，省下大笔钱不好嘛。

维护就是这么悲催的一个部门，

工作都做到最好，不出问题，得到60分，那么就面临工作量不饱满，裁。

工作做的不好，出了问题，那么就是维护的锅。