阿里云 11.12 毛病原因曝光：AK 反常

今天，阿里2023年11月12日阿里云发给客户的云毛一份「官方毛病陈述」曝光 。

影响规模
 。病缘

1、故曝光OSS、阿里OTS 、云毛SLS
、病缘MNS 等产品的故曝光部分服务受到影响 ，大部分产品如 ECS
、阿里RDS、云毛网络等运转不受影响
。病缘

2、故曝光云产品控制台 、阿里管控 API 等成效受到影响 。云毛

时刻。病缘

2023年11月12日17:39～19.20
，毛病时刻为 1 小时 41 分。

问题概略。

2023 年 11月 12 日 17:39 起，阿里如此产品控制台拜访及管控 API调用呈现反常、部分云产品服务拜访反常，工程师排查毛病缘故与拜访密钥服务 (AK)反常有关 。工程师修订白名单版别后，采纳分批重启 AK 服务的方法 ，于 18:35 最初连续康复，19:20 绝大部分 Region 产品控制台和管控 API 康复。

处理进程 。

17:39 ：阿里如此产品控制台拜访及管控 API 调用呈现反常。

17:50：工程师承认毛病是 AK 服务反常导致
，影响云产品控制台
、管控 API 调用反常，以及依靠 AK 服务的云产品服务运转反常 。

18:01：工程师定位到根因 。

18:07 ：最初履行康复方法，包含修订白名单版别、重启 AK 服务。

18:35：杭州等 Region 最初康复正常  。

19:20：绝大部分 Region 的云产品控制台和管控 API 调用康复正常。

缘故。

拜访密钥服务 (AK）在读取白名单数据时呈现读取反常 ，因处理读取反常的代码存在逻辑缺点 ，生成了一份不完整白名单
，导致不在此白名单中的有用恳求失利 ，影响云产品控制台及管控 API 服务呈现反常 ，一起部分依靠 AK 服务的产品因不完整的白名单呈现部分服务运转反常。

改善方法。

1、添加 AK 服务白名单生成效果的校验及告警阻拦才能
。

2 、添加 AK 服务白名单更新的灰度验证逻辑 ，提早发现反常。

3 、添加 AK 服务白名单的快速康复才能 。

4 、加强云产品侧的联动康复才能。