一、这一篇在处理什么
这一篇只处理一件事:在印度尼西亚运行的竞技类游戏,使用维科云的SDK 盾时,如何处理「灰度时协议版本不一致」。
新服务端只认新协议,旧客户端仍在线上。灰度期间一部分用户全部失败。
按 SDK 版本统计成功率。
二、印度尼西亚的网络和高峰
晚间高峰跨度长,群岛不同城市的高峰不会精确重合。移动网络和海缆路径影响大。雅加达正常,不代表其他岛屿正常。
排查时:不要把印度尼西亚收成一个平均值。至少把首都和其他主要城市分开看失败率。
不要这样做:一个探测点全绿就认为全国正常。探测点要放在用户多的城市,而不是只放一个。
三、竞技类游戏要分开的路径
对局心跳、匹配和补丁下载必须分开。心跳走长连接,补丁走可缓存的大文件。
防护边界:不要对心跳使用会打断连接的挑战页。补丁域名可以严格限速,对局通道不行。
验证:在补丁下载的同时开一局匹配,确认下载没有把对局通道堵住。断线后应能续传补丁,而不是重新对局。
四、SDK 盾怎么接
App 里的登录、下单等关键请求走 SDK 隧道,图片和安装包仍走 CDN。服务端校验时间窗、随机数和签名,不把源站地址写进客户端包。隧道失败时可以降级,但降级必须打点,不能静默改去连源站 IP。
产品说明见SDK 盾。只改和「灰度时协议版本不一致」有关的域名或路径,不要把竞技类游戏的其他路径一起改掉。
五、排查步骤
下面五步按因果顺序执行,后一步依赖前一步的结果。步骤针对「灰度时协议版本不一致」,不是一套通用清单。
- 心跳、匹配和补丁下载分成三列。补丁的字节数不要算进心跳的失败率。 把雅加达和其他主要城市分成两张表,晚高峰不要用全国平均值。 这一故障在本步要完成的事:在握手里交换协议版本。
- 心跳保持长连接,禁止对心跳弹出挑战页。补丁域名可以单独限速。 首都正常而其他城市失败时,按城市处理,不要当成整国故障。 这一故障在本步要完成的事:服务端同时接受当前版本和上一版本。
- 补丁启用分段缓存。匹配接口保持不缓存,避免把队列结果缓存给下一个人。 为失败城市单独指定接入点。已经正常的城市不要一起改。 这一故障在本步要完成的事:旧版本走到不认识的字段时忽略,而不是直接断开。
- 源站优先保证心跳和匹配。补丁回源放到独立连接里,避免占满对局通道。 确认海缆路径只影响失败城市后,再决定要不要动源站。 这一故障在本步要完成的事:强制升级只对确实无法兼容的版本打开。
- 边下补丁边发起一次匹配。补丁中断后应能续传,匹配通道不能因此断开。 在失败城市加一个探测点复测。只有雅加达一个点是绿的,不算恢复。 这一故障在本步要完成的事:灰度比例提高前,先看旧版本的成功率。
六、处理办法
- 协议变更先加字段,不改旧字段含义。
- 版本号写进每条失败日志。
- 下线旧协议要有日期。
改完后在印度尼西亚的用户网络上复查,不要只在机房内网看。复查时带上竞技类游戏的验证:在补丁下载的同时开一局匹配,确认下载没有把对局通道堵住。断线后应能续传补丁,而不是重新对局。
七、案例
服务端先全量升级,旧客户端握手直接被断开。恢复对上一版本的兼容后,再按渠道升级客户端。
若同样的现象出现在印度尼西亚,额外核对:不要把印度尼西亚收成一个平均值。至少把首都和其他主要城市分开看失败率。
业务侧核对:对局心跳、匹配和补丁下载必须分开。心跳走长连接,补丁走可缓存的大文件。
这个案例只说明怎么定位,不构成容量或可用性承诺。
八、常见问题
问:为什么不强制所有人升级?
答:应用商店和渠道包不会同一天生效。
问:如何知道还有多少旧版本?
答:按握手里的版本号统计,不要按安装包文件名猜。
问:两个版本要维护多久?
答:至少覆盖最慢渠道的升级周期。
问:同一故障换一个地区或一种业务,排查还一样吗?
答:不一样。每一步都先按竞技类游戏的路径处理,再按印度尼西亚的网络条件收窄,最后才做「灰度时协议版本不一致」这一故障本身的动作。换地区或换业务,前两段操作就会变。
九、边界
只讨论SDK 盾在「灰度时协议版本不一致」上的处理,地区范围是印度尼西亚,业务范围是竞技类游戏。请遵守当地法律。维科云提供网络能力,不对客户业务内容负责。