19时25分00秒之后,断崖式下降。
抖海、头条、洋柿子小说以及公司其他国内业务中,来源地被IP地理库、运营商接入信息和客户端定位共同识别为西安的在线请求量,在短短两秒内同时归零。
赵宝明脸上的困意瞬间消失,一下子清醒了,
“可可,把时间窗口拉到一分钟。”
陈可已经在操作。
一分钟粒度展开成秒级数据。
19时24分58秒,正常。
19时24分59秒,正常。
19时25分00秒,大规模连接断开。
19时25分01秒,QUIC会话数量骤降。
19时25分02秒,TCP存量连接快速清空。
19时25分03秒,西安区域新建连接数接近零。
19时25分05秒以后,只剩下极少量因IP地理库误差被标记为“西安”的请求,还在零星跳动。
陈可皱起眉,“啥情况,看着不像机房故障啊。”
赵宝明把咖啡放到一边。
如果只是字节某个边缘节点发生故障,流量应该按照调度策略迁移到邻近节点。DNS调度、AnyCaSt路由以及运营商侧的流量工程都会让业务出现时延升高、回源比例上升或者局部丢包,却很难让一个千万级别人口城市的终端请求同时消失。
更何况消失的不只有视频业务。
后台统一可观测平台已经开始连续报警。
陕西西安区域活跃设备数异常。
西安区域边缘缓存节点可用性异。
一条接一条。
几十秒后,报警被自动聚合,严重等级开始上调。
坐在另一排的网络工程师宋文泽突然叫了一声。
“赵哥,过来看这个。”
赵宝明走过去。
宋文泽屏幕上打开的是网络侧数据。
移动、电信、联通。西安区域全部出现异常。
宋文泽把BGP监控页面调出来。
“陕西相关公网前缀大部分还在路由表里,没有发生大面积撤销。上游AS也正常。也就是说,从互联网的路由控制平面看,这些地址很多仍然‘存在’。”
陈可站在两人后面,接了一句,“可没人用了。”
办公室安静了下来。
19时26分11秒,周启明拿起内部电话。
“值班经理呢?”
“会议室。”
“叫顾航过来。”
不到一分钟,基础设施值班经理顾航推开门。
相邻推荐:汆肉夹馍加柴鸡蛋,国民男神小乔的TXT百度云 先婚后爱梦筱二结局番外 幻境学园 游梦症 慢性缺氧by姜厌辞未删减完整版 主角玉婉楚瑾玄我卖乖求离开世子爷却不愿放手 七零大杂院:我在年代追凶成团宠 潜渊原著小说笔趣阁无弹窗 雨夜便利店与蓝雨可可最新章节 【那个活下来的女孩】Harely.Lily.Potter 凌晨四点的练功者 英语课代表语涨奶喂我喝奇幻 - 英语课代表语涨奶喂我:晚自习的单词牛奶 冥府十二殿 《 桃花缘 1.风花之翼 》 从海岛开始的日常生活 末日诞晨I 殭屍粉 女施主,踢个球吧! 疼!一提离婚,霍总就发疯! 蓝玫瑰夹进帝国史的那页 无上崛起 叶真彩衣仙子最新章节_育望连载:阳台上的彩线 楼上楼下苏玛丽结局番外 深夜读《异类pdf》异类pdf小说最新章节免费阅读 - 奇幻 - 悦 水豚少女完整版免费阅读:雨棚下数哈欠的人 穿越后被爹爹大哥疯狂宠的小说(奇幻):反派递来一包栗子 羽化飞仙 网游:凡途神匠 法神传说:旧书摊那本三块钱的残卷 师兄,我是你亲师妹吗 我执阎君系统镇万古亡魂