V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
工单节点使用指南
• 请用平和的语言准确描述你所遇到的问题
• 厂商的技术支持和你一样也是有喜怒哀乐的普通人类,尊重是相互的
• 如果是关于 V2EX 本身的问题反馈,请使用 反馈 节点
oktango
V2EX  ›  全球工单系统

阿里云 OSS 挂了?

  •  2
     
  •   oktango · 2023-11-12 17:55:00 +08:00 · 16969 次点击
    这是一个创建于 382 天前的主题,其中的信息可能已经有所发展或是发生改变。

    刚刚业务所有的文件上传都失败了,阿里云的控制台都打不开了。。。。

    第 1 条附言  ·  2023-11-12 19:12:41 +08:00
    阿里云的公告内容:


    尊敬的客户:

    您好!北京时间 2023 年 11 月 12 日 17:44 起,阿里云监控发现云产品控制台访问及 API 调用出现异常,阿里云工程师正在紧急介入排查。非常抱歉给您的使用带来不便,若有任何问题,请随时联系我们。

    --进展更新

    17:50 阿里云已确认故障原因与某个底层服务组件有关,工程师正在紧急处理中。

    18:54 经过工程师处理,杭州、北京等地域控制台已恢复,其他地域控制台服务逐步恢复中。
    91 条回复    2023-11-14 19:48:16 +08:00
    bruceczk
        1
    bruceczk  
       2023-11-12 17:59:46 +08:00
    是的,SDK 报错 The OSS Access Key Id you provided does not exist in our records 。 一脸懵逼
    sansam
        2
    sansam  
       2023-11-12 18:01:41 +08:00   ❤️ 1
    感觉是权限控制系统挂了,RAM 账号都没权限了
    howencilx
        3
    howencilx  
       2023-11-12 18:02:42 +08:00
    云盘跟着一起挂了
    sugars
        4
    sugars  
       2023-11-12 18:03:19 +08:00
    我也发现了,而且 aliyun 官网点登录没用...
    ltq918
        5
    ltq918  
       2023-11-12 18:03:49 +08:00
    控制台上不去了,手机版也登录不上
    tidaizhe
        6
    tidaizhe  
       2023-11-12 18:03:56 +08:00
    docker 镜像跟着挂了
    buaacss
        7
    buaacss  
       2023-11-12 18:04:04 +08:00   ❤️ 1
    是的,RAM 服务整个挂了,所以影响到所有使用 ram 的服务
    sugars
        8
    sugars  
       2023-11-12 18:06:15 +08:00
    InvalidAccessKeyId:The OSS Access Key Id you provided does not exist in our records
    Chad0000
        9
    Chad0000  
       2023-11-12 18:06:36 +08:00 via iPhone
    不能这么整吧,客户都开始抱怨了
    Arthit
        10
    Arthit  
       2023-11-12 18:07:14 +08:00
    登录进不去了...........
    cndns
        11
    cndns  
       2023-11-12 18:07:33 +08:00
    RAM 是内存服务?
    Poluk
        12
    Poluk  
       2023-11-12 18:07:40 +08:00
    阿里网盘这边登录界面直接 G 了,客户端和网页都登陆不进去了。
    toby1902
        13
    toby1902  
       2023-11-12 18:07:45 +08:00
    整个阿里云都异常了
    sugars
        14
    sugars  
       2023-11-12 18:09:14 +08:00
    这算是重大故障了吧?
    mengyaoren
        15
    mengyaoren  
       2023-11-12 18:09:19 +08:00
    。。。登录来回无限跳转
    Freeego
        16
    Freeego  
       2023-11-12 18:09:25 +08:00 via iPhone
    我是 Infuse 连不上阿里云盘了,看来全挂了
    xmumiffy
        17
    xmumiffy  
       2023-11-12 18:12:44 +08:00
    oss error InternalErrorError: Please contact the server administrator, [email protected]
    Ritr
        18
    Ritr  
       2023-11-12 18:16:48 +08:00
    GG 已经挂了好几个小时了
    xmumiffy
        19
    xmumiffy  
       2023-11-12 18:16:54 +08:00
    事件进展
    2023-11-12 18:14
    (GMT+8)
    尊敬的客户:您好!
    北京时间 2023 年 11 月 12 日 17:44 起,阿里云监控发现云产品控制台访问及 API 调用出现异常,阿里云工程师正在紧急介入排查。非常抱歉给您的使用带来不便,若有任何问题,请随时联系我们。

    意思故障了半小时才发通知
    fever365
        20
    fever365  
       2023-11-12 18:17:57 +08:00
    换了浏览器才确认不是浏览器 cookie 问题.来这里才知道确实挂了.
    adherent
        21
    adherent  
       2023-11-12 18:19:32 +08:00
    specified access key is not found 挂了
    OranNeo
        22
    OranNeo  
       2023-11-12 18:20:51 +08:00   ❤️ 1
    连带淘宝的图片也挂了,这波估计要开除几个人才行了
    Byzliu
        23
    Byzliu  
       2023-11-12 18:21:30 +08:00 via Android
    好像全挂了😅
    harrietliu
        24
    harrietliu  
       2023-11-12 18:21:43 +08:00
    我下午的时候发现服务器新放开的端口拒绝访问,吃完饭回来之后连控制台都进不去了
    aloys23
        25
    aloys23  
       2023-11-12 18:22:58 +08:00 via Android
    淘宝好好的
    OranNeo
        26
    OranNeo  
       2023-11-12 18:23:53 +08:00
    @aloys23 网页版你要不要随便搜点什么看一下
    huihuiHK
        27
    huihuiHK  
       2023-11-12 18:24:19 +08:00
    距离上次语雀挂还没过多久
    aloys23
        28
    aloys23  
       2023-11-12 18:24:20 +08:00 via Android
    我试试,手机端好的
    sofukwird
        29
    sofukwird  
       2023-11-12 18:25:46 +08:00 via Android
    控制台也炸了
    OranNeo
        30
    OranNeo  
       2023-11-12 18:26:29 +08:00
    @aloys23 手机端搜一些上架比较早的商品,首图或者详情也全都不可见了
    aloys23
        31
    aloys23  
       2023-11-12 18:26:30 +08:00 via Android
    网页版打开变成这个了 https://tb.alicdn.com/snapshot/h5/index.htm
    calmlyman
        32
    calmlyman  
       2023-11-12 18:27:46 +08:00   ❤️ 1
    看来是双 11 业绩不行了,前阵子各种 app 打开就给你自动跳 tb ,无语住了
    itechnology
        33
    itechnology  
       2023-11-12 18:29:49 +08:00
    是的,我们公司的 APP 收不到验证码,上传不了文件,控制台也炸了,登录不进去
    harrietliu
        34
    harrietliu  
       2023-11-12 18:33:50 +08:00
    登录的二维码刷出来了,但还是进不去
    akamgb
        35
    akamgb  
       2023-11-12 18:35:02 +08:00
    我说 1688 上的图片怎么显示 undefined
    Captain0711
        36
    Captain0711  
       2023-11-12 18:36:45 +08:00
    尊敬的客户:您好!北京时间 2023 年 11 月 12 日 17:44 起,阿里云监控云产品控制台访问及 API 调用出现出现使用异常,阿里云工程师正在紧急介入排查。非常抱歉给您的使用带来不便,若有任何问题,请随时联系我们。
    语雀也挂了。
    fox1751
        37
    fox1751  
       2023-11-12 18:37:53 +08:00
    主站都挂了一会
    TsubasaHanekaw
        38
    TsubasaHanekaw  
       2023-11-12 18:40:16 +08:00
    今年 4 个 9 的可靠性都没了.献祭个 P10 吧
    ukpkmk
        39
    ukpkmk  
       2023-11-12 18:41:27 +08:00
    Specified access key is not found.
    maomaosang
        40
    maomaosang  
       2023-11-12 18:41:39 +08:00
    连客服系统都挂了,require 登陆,听说钉钉传文件也不行
    lux182
        41
    lux182  
       2023-11-12 18:50:04 +08:00
    严重影响了
    liqingyou2093
        42
    liqingyou2093  
       2023-11-12 18:56:58 +08:00
    gg 思密达
    poseidOn7246
        43
    poseidOn7246  
       2023-11-12 18:58:09 +08:00 via Android
    一个多小时了,还没整好?
    cmower
        44
    cmower  
       2023-11-12 18:58:43 +08:00
    负责人谁,直接开了吧。
    harrietliu
        45
    harrietliu  
       2023-11-12 19:01:40 +08:00
    控制台可以进去了
    FAQW
        46
    FAQW  
       2023-11-12 19:02:20 +08:00   ❤️ 2
    微博热搜:淘宝崩了,闲鱼崩了,阿里云盘崩了,钉钉崩了
    toby1902
        47
    toby1902  
       2023-11-12 19:04:10 +08:00
    我这边部分恢复了
    bywenshu
        48
    bywenshu  
       2023-11-12 19:10:50 +08:00
    已恢复?
    cquan
        49
    cquan  
       2023-11-12 19:16:10 +08:00
    好像没问题,19 点 16 分
    chenduke
        50
    chenduke  
       2023-11-12 19:20:15 +08:00
    真牛逼,一个组件异常导致所有区域的大部分服务异常。 这肯定要拿架构师开刀
    wwqm2
        51
    wwqm2  
       2023-11-12 19:28:11 +08:00   ❤️ 15
    是真的搞笑,我连饿了么点了外卖骑手都接不了单,害我白白等一个小时
    theprimone
        52
    theprimone  
       2023-11-12 19:31:40 +08:00   ❤️ 1
    @wwqm2 #51 兄弟你这个把我笑到了 😂
    wwqm2
        53
    wwqm2  
       2023-11-12 19:35:34 +08:00   ❤️ 4
    @theprimone 是啊,我实在气不过,让饿一个小时,打电话问客服,客服说的是骑手进不了系统
    3M
        54
    3M  
       2023-11-12 19:42:43 +08:00 via Android
    阿里开始腐烂
    wweerrgtc
        55
    wweerrgtc  
       2023-11-12 19:50:45 +08:00
    闲鱼收不了货, 显示 404

    本以为是双十一负载比较大
    yuruizhe
        56
    yuruizhe  
       2023-11-12 19:52:19 +08:00
    同+1 ,a 站打不开了
    Quarter
        57
    Quarter  
       2023-11-12 19:58:40 +08:00 via Android
    阿里云全挂了,有啥大惊小怪的,又不是第一次
    ibuki233
        58
    ibuki233  
       2023-11-12 20:01:11 +08:00
    最近已经两次大规模这种事故了吧,严重消耗信任
    kiroter
        59
    kiroter  
       2023-11-12 20:30:43 +08:00
    BAT 轮到阿里掉队了
    alsas
        60
    alsas  
       2023-11-12 20:31:27 +08:00
    P0 级事故
    nealot
        61
    nealot  
       2023-11-12 20:34:25 +08:00 via Android   ❤️ 3
    通常云厂商提供的服务都是多机房容灾的,单个机房异常一般不会出这么大的问题

    看起来是某个组件突破了他们的高可用体系,成为了所有云产品的单点依赖
    porjac233
        62
    porjac233  
       2023-11-12 20:51:55 +08:00
    下一个 P0 即将到来,各位拭目以待。
    spadger
        63
    spadger  
       2023-11-12 20:52:10 +08:00
    这次双 11 没啥负载,自己开始作死了
    oneisall8955
        64
    oneisall8955  
       2023-11-12 20:53:15 +08:00 via Android
    P -1 事故
    Neetordy
        65
    Neetordy  
       2023-11-12 20:56:56 +08:00 via iPhone
    降本增效的结果
    yyzh
        66
    yyzh  
       2023-11-12 21:00:58 +08:00 via Android
    @nealot 你想多了,语雀那事就显示出了阿里有多野鸡
    demoshengxw
        67
    demoshengxw  
       2023-11-12 21:10:15 +08:00 via iPhone
    是阿里云事故了,瞬间拉了一个 300 的哟人的冒烟群,裂开。
    qianzanqi
        68
    qianzanqi  
       2023-11-12 21:21:22 +08:00
    @nealot 很多时候都是:各个组件平时都吹一个机房原地爆炸都能保证高可用。结果一问技术细节,哦高可用依赖 A 服务通过域名调用 B 服务接口,7 层 4 层 lb 挂了呢?那就拉倒了
    xiaofan305
        69
    xiaofan305  
       2023-11-12 21:23:45 +08:00 via Android
    今年双 11 流量应该不是历史新高呀,感觉阿里云不太行,都是吹牛技术多牛逼,可靠性多少个 9 。前段时间我们用的也崩了,找人工客服对方直接关闭咨询,一定要写工单,我 tm 服务中断了,这操作也是没谁了
    Yadomin
        70
    Yadomin  
       2023-11-12 21:26:32 +08:00 via Android
    蹲一个事故报告
    serialt
        71
    serialt  
       2023-11-12 21:32:39 +08:00
    万能重启大法
    54xavier
        72
    54xavier  
       2023-11-12 21:38:59 +08:00
    公司的客服跑来找我说出问题了,我寻思我这几天没改项目啊,刚调试发现是好的,原来是阿里云的问题,而且我刚准备调试就好了。
    jackOff
        73
    jackOff  
       2023-11-13 01:01:25 +08:00
    阿里的互联网产品稳定性还是比百度差不少的
    Desiree
        74
    Desiree  
       2023-11-13 01:07:37 +08:00
    看来上次香港机房事件也没让阿里内部人事产生改变
    akay2351
        75
    akay2351  
       2023-11-13 08:43:47 +08:00
    2023 年 11 月 11 日晚 21:45 左右,天猫也出现过问题。PC 端天猫商品网页无法访问,移动端商品页面加载缓慢。
    bk201
        76
    bk201  
       2023-11-13 09:27:07 +08:00   ❤️ 5
    没事,再裁掉几个背锅的技术,留着那些中层。
    ily433664
        77
    ily433664  
       2023-11-13 09:44:50 +08:00
    有没有人统计过,国内这些云服务提供商,哪个出现问题的次数最多?
    supuwoerc
        78
    supuwoerc  
       2023-11-13 09:55:36 +08:00
    年底了,有人不但年终奖没了,现在可能工作都没了,今天还降温了,不知道捅出篓子的团队现在心里啥心情。。
    gyt95
        79
    gyt95  
       2023-11-13 10:12:54 +08:00
    所以说,面试造火箭有什么用?面霸被面进去实际上是菜鸡。
    pikko
        80
    pikko  
       2023-11-13 10:19:20 +08:00
    真的很惨,阿里全系产品都挂了部分服务。
    someday3
        81
    someday3  
       2023-11-13 10:41:59 +08:00   ❤️ 1
    我还记得大家吐槽阿里收购一个公司搞黄一个公司,现在看来,母公司搞黄也指日可待了
    googleaccount
        82
    googleaccount  
       2023-11-13 10:58:52 +08:00
    语雀:我特么上次赔的会员还有人没领呢,咋又挂了。
    Gress
        83
    Gress  
       2023-11-13 11:28:16 +08:00
    一家云商一年崩这么多次居然还有人用?
    RexKang
        84
    RexKang  
       2023-11-13 12:35:39 +08:00
    @Gress 没用过……可能其他家会崩更多次吧。
    janwarlen
        85
    janwarlen  
       2023-11-13 12:38:48 +08:00
    @bk201 #76 现在好像基层干活的都是内包了(内部的外包...)
    Feiex
        86
    Feiex  
       2023-11-13 14:32:11 +08:00
    @Desiree 还没变?逍遥子背锅走了
    go522000
        87
    go522000  
       2023-11-13 14:45:45 +08:00
    很好奇阿里云这个底层组件到底是多底层啊。。。全球性,而且还是所有服务都挂了。
    HKzy
        88
    HKzy  
       2023-11-13 14:49:26 +08:00
    阿里云名声尽失
    289396212
        89
    289396212  
       2023-11-13 14:55:37 +08:00
    阿里的技术真的都是靠吹
    ljzxloaf
        90
    ljzxloaf  
       2023-11-13 20:24:08 +08:00 via iPhone
    营销不吹不行啊,用户没有多少真正懂技术的。我记得之前有次阿里云的机房光纤被挖断了,然后他们搞了个发布会,现场剪网线,支付宝马上就恢复了。虽然看起来很牛逼,给人的感觉阿里云就算网线挖断了都不影响服务。但实际上这可能只是机房内部的容灾,说白了忽悠下外行,搞点营销噱头罢了。互联网服务能被拔网线?不现实的嘛!只能说在某些情况下可以实现一定的容灾。但是这么一搞给不懂技术的普通大众造成了误解,然后下次你出事了发现不符合他们的预期,那不就得喷你?吹牛逼可以,别吹得太离谱了就行。
    Desiree
        91
    Desiree  
       2023-11-14 19:48:16 +08:00
    @Feiex 背锅有用,就不会不到一年时间就出事了,降本增效也就是说给上面资本听的,真出事,找人背锅就能好,我们早就是发达国家了
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1222 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 30ms · UTC 18:29 · PVG 02:29 · LAX 10:29 · JFK 13:29
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.