备份集群软件升级
我们正在升级备份集群上的软件。在17.30至18.30(中欧夏令时)期间,快照和备份将不可用约1小时。
- 处理进展
- 3 条公开更新
修复:维护已成功完成。
Webdock
我们正在升级备份集群上的软件。在17.30至18.30(中欧夏令时)期间,快照和备份将不可用约1小时。
修复:维护已成功完成。
我们检测到通往 Webdock.io 的高数据包丢失。NOC 团队正在调查此事。 对给您造成的不便深表歉意。
我们目前正在调查此事件。
修复:此事件已解决。
我们将在周二(28 日)欧洲中部夏令时间 10.00 至 14.00 之间对我们的网络执行重要的安全增强。升级过程包括对所有主机系统进行完整的内核升级。该过程将导致丹麦(Denmark)所有客户经历短暂的网络中断。 通常,系统重新加载时我们预计会出现 5 秒的中断,但对于一些非常繁忙的系统,或某些客户实例上网络挂起的情况,持续时间可能长达几分钟。对于由此造成的任何不便,我们提前表示歉意。
修复:维护已成功完成
为了平衡负载和稳定性,我们将把 Pico4 实例迁移到其他物理系统。每次服务器迁移都会相当快(不超过 10 分钟,大多数情况下在 5 分钟以内)。迁移开始和迁移完成时,您都会收到一封电子邮件。迁移发生在 4 小时的维护窗口内,从欧洲中部夏令时间 8 点开始,到 12 点结束。
修复:维护已成功完成。
我们目前正在调查此事件。
修复:此事件已解决。
我们目前正在调查此事件。 我们的 IPV6 路由存在问题。团队已知悉并正在排查。 如果您遇到任何问题,您可以通过我们的控制面板关闭 IPV6。
修复:此事件已解决。
我们正在升级备份集群上的软件。在 16.30 至 17.30(CEST)期间,快照和备份将不可用约 1 小时。
修复:维护已成功完成。
我们目前正在调查此事件。
修复:此事件已解决。
我们正在升级我们的AI聊天的功能。
修复:维护已成功完成。
正在重启主机。停机时间将为 5-10 分钟。对于造成的不便深表歉意。
修复:此事件已解决。
我们目前正在调查此事件。
修复:此事件已解决。
我们注意到 AI 聊天出现了问题,正在努力修复。
修复:此事件已解决。
主机需要重启。将有几分钟的停机时间。对造成的不便深表歉意。
修复:此事件已解决。
我们将于周三(20日)10:00至14:00 CEST期间对网络进行重要的安全增强。升级过程包括对所有主机系统进行完整内核升级。该过程将导致丹麦所有客户网络短暂中断。通常,系统重新加载时会有5秒的中断,但对于一些非常繁忙的系统或某些客户实例上网络挂起的情况,持续时间可能长达几分钟。我们提前为造成的任何不便致歉。
原因:很遗憾,由于今天人员短缺,本次维护已取消。我们准备好后会发布新的维护窗口。 对造成的不便深表歉意。
昨天对我们的备份集群进行了一次重大软件升级之后,我们在执行备份时频繁遇到超时。这是由于我们的虚拟机管理程序 Incus 中出现的某些回归问题所致。我们已让 Incus 团队调查此事,并希望最多在一两天内解决。在此期间,如果你在尝试执行快照时遇到错误,可以重试,希望它能成功通过。 然而,反复失败意味着你的快照确实存在于本地,只是尚未同步到我们的存储后端,在根本问题解决之前,它不会同步。此问题似乎主要影响新实例——昨天之前创建的“旧”实例受影响较小。
原因:昨天对我们的备份集群进行了一次重大软件升级之后,我们在执行备份时频繁遇到超时。这是由于我们的虚拟机管理程序 Incus 中出现的某些回归问题所致。我们已让 Incus 团队调查此事,并希望最多在一两天内解决。在此期间,如果你在尝试执行快照时遇到错误,可以重试,希望它能成功通过。 然而,反复失败意味着你的快照确实存在于本地,只是尚未同步到我们的存储后端,在根本问题解决之前,它不会同步。此问题似乎主要影响新实例——昨天之前创建的“旧”实例受影响较小。
修复:本次事件已解决,我们的备份集群在过去 24 小时内一直正常运行。
我们正在为备份存储扩增 200TB 的存储空间。存储后端将不可用 1-2 小时。
修复:维护已成功完成
我们目前正在调查此事件。
修复:此事件已解决。
我们DK数据中心中的一台Ryzen系统出现温度异常。我们认为系统中可能有一个或多个风扇发生故障,需要对此进行调查。为以防万一,我们将于周四早上06:00(中欧夏令时间)为此维护预留2小时,但我们预计这将耗时45分钟或更短。在此期间,您的服务器将停机,如果您受到影响,已通过电子邮件通知您。
原因:我们DK数据中心中的一台Ryzen系统出现温度异常。我们认为系统中可能有一个或多个风扇发生故障,需要对此进行调查。为以防万一,我们将于周四早上06:00(中欧夏令时间)为此维护预留2小时,但我们预计这将耗时45分钟或更短。在此期间,您的服务器将停机,如果您受到影响,已通过电子邮件通知您。
修复:维护已成功完成
我们目前正在调查此事件。
修复:事件已解决,并正在进行改进以防止此类事件再次发生。
4月27日星期一 CEST 时间20:00,我们将对 [app.webdock.io](http://app.webdock.io) 的 Webdock Dashboard 进行重大升级——维护最多需要2小时,但我们希望在30分钟或更短时间内完成。 升级要求我们完全关闭dashboard,在此期间您将无法使用我们的dashboard与您的服务器进行交互,因此请确保您在此时间之前已完成任何类似服务器快照或恢复的任务。您的服务器和所有其他服务将完全正常运行,只有主dashboard会因维护而关闭。 在维护期间,指标收集将暂停,因此您会看到此时间段内利用率指标的数据存在缺口。预计不会有其他影响。
原因:维护比预期更快完成,因为我们事先对流程进行了充分准备和测试。我们基本已完工,但会再检查一段时间日志和其他零散内容,以确保一切运行顺利,之后才会宣布全部恢复正常。
修复:维护已成功完成。我们解决了一些小问题,最后一个是 Github 登录不再可用的问题。我们现在应该处于良好状态。祝您愉快,感谢您今晚对我们的耐心!:)
我们目前正在调查此事件。
修复:此事件已解决。
我们目前正在调查此事件。
修复:此事件已解决。
我们目前正在调查此事件。
修复:此事件已解决。
我们现在正在对存储集群 DK DC1 进行一些必要的维护,预计最长 2 小时。在此期间,快照功能将不可用。
修复:维护已顺利完成。所有快照操作均已恢复可用。
其中一台主机(基于 lxd 的旧版主机)似乎无响应或已崩溃。该主机需要重启。
修复:此事件已解决。
其中一台主机(基于 lxd 的旧版主机)似乎无响应或已崩溃。该主机需要重启。
修复:此事件已解决。
我们在与其中一个 Epyc 主机通信时遇到问题——那里的所有客户运行正常,只是我们在与主机系统交互和发送命令时遇到问题。
该主机需要重启才能正常运行。很抱歉给您带来不便。
修复:此事件已解决。
我们目前正在调查此事件。
修复:此事件已解决。
主机需要重启。实例将面临 2-5 分钟的停机。 对造成的不便深表歉意。
修复:此事件已解决。
我们目前正在调查此事件。
修复:此事件已解决。
主机将需要重启约 5-10 分钟。对于给您带来的任何不便,我们深表歉意。
修复:此事件已解决。
我们的数据中心同事正在调查该问题。看起来似乎其中一个 CPU 发生了故障(双 CPU 配置)。他们正在努力将主机恢复运行。 对造成的不便深表歉意。
原因:我们的数据中心同事正在调查该问题。看起来似乎其中一个 CPU 发生了故障(双 CPU 配置)。他们正在努力将主机恢复运行。 对造成的不便深表歉意。
修复:我们已完成所有迁移。本次事件应到此结束。对于造成的不便,我们深表歉意。
服务器将停机 5-10 分钟。给您带来不便,敬请谅解。
修复:此事件已解决。
物理主机需要重启。运行在该主机上的实例将经历 15-20 分钟的停机时间。
我们在 DK DC-1 的某些前缀(IP 地址段)上观察到间歇性丢包。这可能是另一起未得到妥善缓解的小规模 DOS 攻击。我们目前正在调查此事件。
我们的网络当前出现了问题。我们正在调查此事件。
原因:这看起来像是 DOS 事件。我们正在调查自动缓解措施为何未能奏效。
修复:本次事件已解决。我们对今晚带来的不便深表歉意。!
主机需要重启,将会有 5-10 分钟的停机时间。给您带来不便,敬请谅解。
修复:此事件已解决。
主机现在将重启。将有 5-10 分钟的停机时间。
修复:此事件已解决。
主机需要重启。服务器将经历 5-10 分钟的停机。对造成的不便表示歉意。
修复:此事件已解决。
我们的一台基于 lxd 的主机已无响应,需要重启。
修复:此事件已解决。
主机需要重启。容器 VPS 将经历 5-10 分钟的停机时间。
修复:此事件已解决。
我们的一台 EPYC 系统宕机,因此 VPS 将无法访问。我们正在调查此事。
修复:此事件已解决。给您带来不便,敬请谅解。
服务器需要重启。预计会有 5-10 分钟的停机时间。对造成的不便深表歉意。
修复:此事件已解决。
主机需要重启。将有 5-10 分钟的中断时间。对造成的不便深表歉意
修复:此事件已解决。
我们的一台旧版容器化主机需要重启(系统已冻结)才能正常运行。将会有几分钟的停机时间。 给您带来的不便,敬请谅解。
修复:此事件已解决。
我们的 NOC 团队已识别出过去 2 天链路抖动和高 CRC 错误率的问题。我们将尝试通过更换光模块来修复此问题。
修复:维护已成功完成。未发现对客户工作负载造成影响。
服务器需要重启。预计会有 5-10 分钟的停机时间。对造成的不便深表歉意。
修复:此事件已解决。
我们的一个 KVM 主机似乎无响应。我们的 NOC 人员目前正在调查此事。我们将尽最大努力尽快恢复正常。 对于给您带来的不便,我们深表歉意。
修复:此事件已解决。
本周四早上,DK DC1 将进行一些电力工程。我们将新增供电,提高允许从电网获取的电力。该操作意味着市电将需要中断约 5-10 分钟。这将由我们的 UPS 和发电机系统处理——但以防万一发生意外情况,我们特此宣布这个 2 小时的维护窗口。
修复:维护已成功完成
将有 5-10 分钟的中断时间
修复:此事件已解决。
似乎有一台 Ryzen 主机出现问题,导致启动时出现故障。NOC 团队正在处理。受影响的客户在仪表板中会看到警报。
修复:此事件已解决。
将会有5-10分钟的停机时间。对造成的不便深表歉意。
修复:此事件已解决。
我们在 DK DC1 有一台 Xeon 主机宕机——NOC 团队正在努力让系统恢复正常。我们希望在约10-15分钟内让客户实例恢复运行。
宿主机需要重启。将会有15至20分钟的停机时间。
修复:此事件已解决。
系统有些卡顿。快照和启动操作似乎挂起。需要重启,因此会有 5-10 分钟的停机时间。
修复:此事件已解决。
该主机需要重启,将在 5-10 分钟内恢复运行。
修复:此事件已解决。给您带来不便,敬请谅解。
主机需要重启才能正常运行。实例将经历5-10分钟的停机时间。
修复:此事件已解决。
我们再次遭遇了一次小规模故障,影响了 Ryzen 和 Epyc 工作负载,以及我们的仪表板和相关服务。事件持续了大约 10 分钟。所有客户应已恢复正常运行。对于由此造成的不便,我们深表歉意。
我们目前正在调查此事件。一个网络层面的事件似乎影响了我们数据中心内的单个机架,导致我们的仪表板及相关服务宕机,同时也有许多 Epyc/Ryzen 客户实例受到影响。
原因:本次事件已解决,所有客户和服务均已恢复正常。我们为今晚在此造成的不便深表歉意。本次事件确实是电力事件,我们的电工将在早上进一步调查根本原因,希望我们能找到原因并防止未来再次发生类似情况。
修复:本次事件已解决,所有客户和服务均已恢复正常。我们为今晚在此造成的不便深表歉意。本次事件确实是电力事件,我们的电工将在早上进一步调查根本原因,希望我们能找到原因并防止未来再次发生类似情况。
我们的一台基于容器的宿主机需要重启。将会有几分钟的停机时间。
修复:此事件已解决。
主机需要重启。预计会有几分钟的停机时间。
修复:此事件已解决。
主机需要重启。将有几分钟的停机时间。
修复:此事件已解决。对造成的不便深表歉意。
主机需要重启。实例将经历几分钟的停机时间。
修复:此事件已解决。
主机无响应,需要重启。将会有 5-10 分钟的中断时间。
修复:此事件已解决。对造成的不便深表歉意。
我们有一台基于 lxd 的主机需要重启。此处的实例将出现一定的停机时间。
修复:此事件已解决。给您带来不便,敬请谅解。
我们的一台 Ryzen 主机宕机/无法访问。我们正在调查此事。 对给您带来的不便深表歉意。
修复:此事件已解决。对于造成的不便,我们再次深表歉意。
维护现已进行中。
修复:维护已成功完成
我们的其中一台主机在内核升级后需要重启。所有 VPS 将经历一段停机时间,最长 15 分钟。 给您带来不便,敬请谅解。
我们的其中一台主机在内核升级后需要重启。所有 VPS 将经历一段停机时间,最长 15 分钟。 给您带来不便,敬请谅解。
我们有一台宿主机需要进行内核升级和重启。您的 VPS 将最多中断 5-10 分钟,通常时间会短得多。您可以登录 Webdock 检查您的服务器是否受到影响,相关信息会显示在页面顶部的红色警报窗口中。
修复:重启已完成,所有客户实例均已恢复运行。对于短暂的中断,我们深表歉意。
我们一直在努力扩展我们的存储集群。配置出现问题,导致某些快照操作(尤其是较旧的 VPS 服务器上的)无法正常工作。我们目前正在调查此事件,并希望今天内能解决。由于此问题,我们有一部分客户今天没有运行自动备份。
原因:我们一直在努力扩展我们的存储集群。配置出现问题,导致某些快照操作(尤其是较旧的 VPS 服务器上的)无法正常工作。我们目前正在调查此事件,并希望今天内能解决。由于此问题,我们有一部分客户今天没有运行自动备份。
修复:昨晚,hypervisor 支持团队实施了一项修复,并针对我们一直遇到的集群通信问题部署了一个热修复。这基本上意味着:a) 我们认为该问题已得到解决,后续不会再出现;b) 昨晚部分自动快照未能完成。今晚中欧夏令时(CEST)时间运行后,您应该能够再次看到每日快照正常出现。 我们暂时将此事件标记为已解决,但仍在进行监控。
我们在丹麦遇到了一次小型网络中断,约 3 分钟内某些服务无法访问。我们目前正在调查此事件。
我们注意到 DK 的网络时断时续,一些客户站点宕机后重新上线。我们目前正在调查此事件。 对造成的不便深表歉意。
修复:此事件已解决。不过,我们会密切关注此事。 对造成的不便,我们深表歉意。