文章详情

XM交易:经历一周宕机考验后,CIO们已在为下一次故障做准备

币界网报道:

一切始于周四,当时微软发生故障,扰乱了包括 Outlook、Teams 和 Copilot 在内的办公服务。一天后,美国联邦航空管理局(FAA)发布地面停飞令,导致全美航班起飞暂停,打乱了超过150万名乘客的旅行计划。

本周以来,更多中断接连出现:又一次故障影响了由富国银行和 Capital One 等金融巨头运营的银行网站和应用,随后又波及联合航空、苹果,以及美国国家安全局的内部通信网络。

目前没有证据表明这些影响银行、航空公司、科技巨头和政府机构的系统中断彼此相关。但围绕这些影响到大型技术系统、而人们往往习以为常的故障,外界的关注度明显上升,这也让人们更加重视 IT 的可靠性和韧性;如何向员工、客户、高管和董事会通报最新故障进展;以及如何开始撰写事后报告,评估系统中断是如何被处理的,以及业务连续性计划中哪些部分还可以改进。

“我们的做法是,韧性并不真正来自一份文件或一个备用系统,”新泽西州医疗系统 AtlantiCare 的首席信息与数字官 Jordan Ruch 说,“它是组织通过规划逐步建立起来的能力,而且要在事情发生前就和运营部门一起做好准备。”

在美国企业界,本周对业务运营影响最大的中断是微软故障,而 AtlantiCare 也受到了影响。Ruch 将其技术系统划分为不同的重要等级。临床系统和核心基础设施最多有三层冗余。若这些关键系统中的某台设备或网络出现故障,至少总会有两套备份可用。

微软的工具并不被视为同等关键,因此当故障发生时,它拖慢了“我们满足医疗系统需求的能力”,Ruch 说。由于员工越来越依赖 Copilot 等工具,这一事件也促使 AtlantiCare 内部讨论,为这些应用建立更多冗余。

Ropes & Gray 的 CIO Marsha Stein 表示,这家律所已经建立了多层冗余,包括在 Teams 出现问题时用于联系员工的紧急通知系统,以及在 Outlook 失灵时启用的备用电子邮件系统。“你不能对客户说,‘抱歉,我们没有任何电子邮件,帮不了你’,结果这次故障持续了18个小时,”Stein 说,“我们有这些系统非常重要,这样律师才能联系客户。”

到周二上午,Stein 已与 Ropes & Gray 的治理管理委员会进行了沟通。她表示,这将是一场持续的对话,讨论微软故障期间发生了什么,以及哪些地方本可以做得更好。“没有什么是完美的,”Stein 说,并补充称,领导层需要“跳出框架,思考下一个可能受影响、我们需要做好准备的系统是什么”。

Lockton 的 CIO Shreyas Mysore 表示,上周保险经纪公司及其他机构面临的一个挑战是,微软在告知客户此次故障可能产生全球影响方面动作迟缓。“我认为微软本可以做得更好一些,提前给我们一个提示,说,‘看,某些关键基础设施开始失效了,’”Mysore 说。

这类事件发生时,沟通至关重要。Mysore 说,在 Lockton,首要任务是鼓励经纪人联系客户,主动分享更新信息,同时也要在内部向管理层传递信息。董事会通常可以稍后再了解情况——在这次事件中,Lockton 说他可以等到12月初下一次会议时再向董事会做完整汇报。

Mysore 说,IT 团队还会出具一份微软故障事件报告,内容包括公司受到的影响、故障严重程度,以及一份内部检查清单,用于评估高管参与情况、内部沟通做法和需要改进的地方。

“我要求供应商对可靠性负责,我要求自己对韧性负责,”Mysore 说。

网络安全公司 Fenix24 在电子邮件系统宕机时,能够把客户沟通转移到 Signal 和 WhatsApp 等替代渠道。该公司还采用混合模式,既依赖 Microsoft 365,也使用本地部署的内部通信系统。Fenix24 首席信息安全官兼联合创始人 Heath Renfrow 表示,企业必须在故障发生前,就为员工群体以及关键客户关系建立这些替代沟通渠道。

微软故障也可能促使一些公司考虑投资更多冗余通信系统,例如 Google,尤其是面向关键高管。“这当然有可能,也是你需要从成本角度去考虑的事情,但这不是个坏主意,”Renfrow 说。

网络安全公司 Akamai 云技术集团高级副总裁兼首席技术官 James Kretchmar 表示,故障发生时,供应商和客户都需要关注清晰且一致的沟通。“重要的是要发出高质量的沟通,让依赖这项服务的人能够理解如何最好地根据当前情况调整自己,”Kretchmar 说,“你必须做很多工作来传递实用信息,但又不能造成更多问题。”

微软、FAA 以及过去几天里遭遇故障的其他组织,都必须在分享系统何时恢复上线的现实预期之间取得平衡。软件公司 Pendo 的 CISO Chuck Kesler 表示,沟通不足和过度承诺都会损害组织声誉。

“我确实见过一些组织把信息压得太久,这会侵蚀信任,”Kesler 说。但他表示,如果系统修复预计需要两小时,那么更理想的做法也许是告诉主要利益相关方,可能需要四小时才能解决。“根据我的经验,从恢复角度看,事情通常确实会比你预期的稍微久一点,”Kesler 补充说。

John Kell

新闻包

是什么导致了 FAA 的地面停飞? 关于 FAA 周五为何叫停所有航班,公众场合流传着一些相互矛盾的信息。国土安全部长 Markwayne Mullin 周一提出一种说法,称问题与“超级智能”有关——这是政府对 AI 的偏好称呼——同时也重申政府立场,即这不是一次网络攻击。与此同时,FAA 尚未确定根本原因,但一位发言人已确认,FAA 已停止安装新的 Juniper Networks 路由器,并据报道关闭了那些已经安装的设备,转而将空中交通系统切换回 Cisco 路由器。

Nvidia:“我们的势头是真实的。” 在长期担任首席执行官兼联合创始人 Jensen Huang 辞职的戏剧性事件之中(稍后还会提到),这家 AI 芯片制造商周二公布了超出预期的最新季度业绩,并上调了下一财年的销售预测。临时首席执行官 Colette Kress 与新任董事长 Harvey Jones 一起对业绩表示赞赏,他们是在这场记忆中最不寻常的 CEO 交接之一中接手公司的。董事会重申无意让 Huang 回归,尽管这位前 CEO 表示愿意回来,特朗普总统和埃隆·马斯克也支持他回归,而且一份由 Nvidia 员工和知名科技高管签署的请愿书也在流传。

在与中国和俄罗斯会晤前,故障与 AI 让特朗普面临压力。 特朗普将于周三抵达中国,并于周四与中国和俄罗斯总统举行三边会晤。围绕 AI 的快速崛起、其对全球经济增长的影响,以及它对国家安全构成的风险等问题,都笼罩着这次会晤。临近会晤,中国国内有人担心该国可能失去获取美国 AI 技术的渠道,尤其是在回应 Huang 与一名据称是间谍的中国商界女性的婚外情之后。美中 AI 关系出现摩擦加剧的迹象。本周,政府宣布了新规,将限制中国通过间接方式获取美国先进计算芯片和服务器的部分渠道;与此同时,Nvidia 表示不会向中国发运其 Hopper 数据中心芯片,但没有说明原因。

随着 Anthropic IPO 临近,风险成为更突出的主题。 随着 Anthropic 预计将为其首次公开募股定价,《金融时报》报道了已承诺投入 AI 基础设施的9000亿美元,以及为削减计算成本所做的持续努力。彭博社也聚焦算力问题,但更关注如果 Anthropic 无法获得足够算力、而谷歌等竞争对手需求上升时,可能出现的商业风险。与此同时,《纽约时报》则花更多篇幅讨论伦理考量,以及 AI 可能被滥用的方式。

加州起诉 OpenAI。 周一,这家 ChatGPT 母公司遭到加州起诉,指控这家 AI 公司在开发和测试 AI 模型时没有采取适当的保障和监控协议,从而“误导并危及公众”。诉讼特别提到了7月的 Hugging Face 事件,当时其两个 AI 模型成功入侵了该在线平台的系统,以及其他网络事件。OpenAI 发言人 Drew Pusateri 对《纽约时报》表示:“这起诉讼似乎把 OpenAI 单独拎出来,针对的是每一家主要 AI 实验室都已识别出的挑战。”

采用曲线

重建工作流程是看到 AI 正面成效的关键因素。根据 Bain & Company 最新的 AI 准备度调查,在接受调查的200位商业领袖中,三分之一的公司表示,至少有一个 AI 用例带来了收入增长或成本削减,比一年前提高了10个百分点。但在这些结果背后,这家咨询公司表示,已经全面重建工作流程的企业,实现 AI 目标的可能性是其他企业的两倍。

不过,在人员层面仍有大量工作要做。Bain 表示,只有25%的公司称自己“实质性”重建了工作流程,而近40%的公司正在重新设计现有工作流程中的某些步骤,以更好地支持自主代理式 AI 的能力。Bain 合伙人、该报告合著者 Sanjin Bicanic 说,工作流程的变化需要广泛的整体改造,而不是只关注一两个 AI 正在介入的任务。“这往往是一个持续数月的过程,”Bicanic 告诉 Fortune。

该研究中另一个令人意外的发现是,AI 对就业的影响看起来远没有几年前人们预期的那么严重,当时 AI 实验室的 CEO 们曾预测会出现大规模岗位流失。第三季度,企业预计随着 AI 采用,将带来10%的员工人数增长;在招聘规划中,软件开发、销售与运营以及客户入职环节的用工需求预计会上升,而法律、人力资源和财务领域则会出现较小幅度的缩减。

“随着人们更多使用这一解决方案,他们对 AI 如何影响劳动力的预期实际上变得更加积极了,”Bicanic 说。

由 Bain & Company 提供

招聘雷达

  • 招聘:
  • 飞利浦正在招聘一名负责互联护理的 IT 主管,工作地点在马萨诸塞州剑桥。公布薪资范围:每年27.9万至44.6万美元。
  • 田纳西州政府正在招聘一名 CIO,工作地点在纳什维尔。公布薪资范围:每年14万至19万美元。
  • Energy Fuels 正在招聘一名全球 IT 副总裁,工作地点在丹佛。公布薪资范围:每年25万至31万美元。
  • 明尼苏达大学正在招聘一名副 CIO,工作地点在明尼阿波利斯。公布薪资范围:每年25万至30万美元。
  • 录用:
  • 穆迪任命 Tim Bhatt 担任新设立的 CIO 职位,自12月7日起生效。Bhatt 还将继续担任穆迪评级的 CTO,这一职位他自2018年以来一直担任。作为 CIO,他将负责这家信用评级机构的企业战略。在加入穆迪之前,Bhatt 曾在 Ally Financial 工作近十年,担任 CTO,并在美国银行和摩根大通担任过领导职务。
  • Rothschild & Co 任命 Geoffroy de Ridder 担任这家家族控制的金融服务公司财富与资产管理业务的首席技术与运营官,自12月起生效。de Ridder 最近担任瑞士银行 Lombard Odier 的技术与运营负责人。他此前还曾在瑞银担任高级职务。
  • Model N 任命 Koti Reddy Nandyala 担任 CTO,负责这家软件公司的工程战略、平台架构和技术路线图。Nandyala 最近担任软件巨头 Salesforce 的工程副总裁。他此前还曾担任 Conga 的 CTO,并在 Callidus Cloud 工作了近二十年。
  • Cognito 宣布了三项高管任命,其中包括任命 Urvashi Tyagi 为 CTO。她最近担任医疗设备公司 Resmed 的 CTO,也曾在 ADP 担任 CTO,并在美国运通和亚马逊担任过高级领导职务。
  • Inspiren 任命 Gang Hua 担任其 CTO。在加入这家老年生活护理技术平台之前,Hua 曾担任亚马逊 Alexa AI 的应用科学总监。他此前还曾担任 Dolby Laboratories 多模态体验实验室副总裁,并在微软、IBM 和诺基亚担任研究职务。