菠萝tv 不承诺永不宕机,但承诺每一次宕机都有编号、有响应时限、有复盘。我们每 5 分钟对全部节点发起一轮探测,连续 2 次失败自动建单;故障按影响面分成 P0 到 P3 四级,P0 要求 12 分钟内恢复播放或降级播放。常规维护固定在每周三 03:00–04:30,提前 48 小时公示。窗口内你看到的是一个写明结束时间的维护页,而不是一直转圈的加载动画。
INC-2024-118
发现 03:41 · 恢复 04:00(19 分钟)
周三 03:00–04:30
单次变更上限 90 分钟
Operational transparency
我们不打算用「高清流畅」「海量资源」来形容自己。下面四张卡片对应的是四个可以核对的东西:多久探测一次、故障分几级、维护放在什么时候、你从哪里看到进展。每一条都有人负责,也都有超时后果。
我们对 38 个边缘节点和 7 条回源线路各发起一次 HTTP 探测,同时记录首帧耗时与实测码率。连续 2 次失败自动建单,第 3 次失败直接升级为 P1;值班室在探测失败 90 秒内收到弹窗,不必等用户来投诉才发现。
P0 影响全站播放,12 分钟内必须恢复或降级;P1 影响单省份或单线路,30 分钟;P2 影响某一个清晰度档位,4 小时;P3 是字幕、收藏之类的非播放功能,24 小时内闭环。超时未处理,单子会自动升级到技术负责人手机上。
常规维护固定在每周三 03:00–04:30,提前 48 小时在 App 内横幅和状态页同时公示,单次变更不超过 90 分钟。紧急安全补丁可以打破窗口,但必须在事后 24 小时内补发公告,写清改了什么、影响哪些客户端版本。
每起事故有独立编号和时间线:发现、定位、缓解、恢复、复盘五个节点各打一个时间戳。事故结束后 72 小时内发布复盘,写清根因和具体改动,包括我们自己的操作失误。复盘归档不删除,两年内的记录都能翻到。
5 分钟
全网巡检间隔
12 分钟
P0 恢复时限
99.94%
近 90 天可用率
72 小时
故障复盘发布
口径说明:可用率按「播放请求是否成功返回首帧」计算,不含用户本地网络问题;近 90 天共发生 P0 事故 2 起、P1 事故 9 起,全部记录在状态页归档中,编号从 INC-2023-001 起顺延。
Real outages, real feedback
下面三条评价我们一个字没改,包括不满意的部分。他们评价的不是界面好不好看,而是事发之后多久有回应、多久恢复、信息是否对得上。
「去年 11 月那次全站 P0,我是先在状态页看到编号的,比群里吵起来早了大概六分钟。19 分钟恢复,比我预期慢了 7 分钟,但时间线写得很清楚——回源线路切换失败重试了一次。缺点是短信通知只推给开了会员的用户,普通用户只能自己刷状态页,这点希望改。」
陈默
使用 14 个月 · 上海
「周三凌晨维护我是能接受的,因为提前两天就在 App 里挂了横幅。有一次维护超时到 05:10,状态页上直接把预计时间改成 05:30,没有一直挂着"马上就好"糊弄人。不满意的地方是维护页只有静态文字,没有进度条,也不知道卡在哪一步。」
林一舟
使用 8 个月 · 成都
「P2 级别的字幕不同步,我早上 9 点提交的,下午 1 点半收到回复说已修复,中间没让我反复提交日志。他们承认是字幕组的打包脚本出了问题。这个速度在同类产品里算快的,不过提交入口藏得有点深,要进设置里翻到第三层,找了两分钟。」
苏晓(阿 May)
使用 2 年 1 个月 · 广州
FAQ
下面这些问题都来自真实工单和评论区,主要围绕「公告和实际为什么对不上」「普通用户怎么知道进展」。
挪不了,除非是安全补丁。我们统计过过去 12 个月的播放曲线,周三 03:00–04:30 是全天并发最低的 90 分钟,约为晚高峰的 6.8%,在这个时间点做数据库变更影响面最小。如果你恰好在这个时段观看,会看到维护页而不是黑屏。全年最多跳过 4 次窗口,节假日会提前一周在状态页标注「本周不停机」。
有两种情况。第一种是评估失误,我们在第一次更新时给了过于乐观的时间,这是我们的问题;第二种是缓解后才发现还有二级问题。规则是:一旦预计时间延长,状态页必须在 10 分钟内改写新的预计时间,并注明「原预计 XX:30,现预计 XX:50」,不允许把旧时间悄悄删掉。你可以直接对比时间线里每个时间戳,超过 10 分钟没更新的,算我们违规。
目前只有两个渠道对全部用户开放:状态页本身,以及 App 内故障横幅(P0/P1 触发,出现在首页顶部)。短信和推送只对开通会员且绑定手机号的用户发送,这是我们承认的短板——2024 年 Q3 计划把 P0 推送放开到全部注册用户,但受短信成本限制,大概率先开放推送、仍然不发短信。所以最稳的方式还是收藏状态页。
会,但规则写得很死,不搞人情:单次 P0 影响超过 30 分钟,所有会员自动延长 1 天;超过 2 小时,延长 3 天。P1 累计满 3 次(90 天内)折抵 1 天。补偿自动到账,不需要你申请、不需要联系客服,第二天会在消息中心收到一条记录。非会员目前没有现金补偿,这是产品限制,我们不打算在这点上含糊其辞。
会降码率,但必须留痕,而且要在状态页挂一条 P2 记录。规则是:单条线路拥挤时允许从 1080P 降到 720P,降档持续超过 15 分钟就必须在状态页写明影响省份和预计恢复时间;不允许降到 480P 以下而不发公告。播放器右上角会显示当前码率,你可以自己核对状态页有没有对应的记录——查不到就是我们的问题,欢迎在设置第三层的「问题反馈」里带截图提交。