OVHcloud Web Hosting Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
filerz157
Incident Report for Web Cloud
Resolved
After the planned maintenance, we are experiencing some issue with this server.

Related task:
http://travaux.ovh.net/?do=details&id=52786

Start: 23:00 CEST
End:

Update(s):

Date: 2021-08-26 16:05:29 UTC
Start time : 23/08/2021 21:00 UTC
End time : 26/08/2021 10:51 UTC
Service impact : 4096 services unavailable on filerz26 (restoration of the service on the filerz157)
Root cause : Due to maintenance on the filerz, there was a loss of data between 22/08 22:00 UTC and 23/08 21:00 UTC.
Actions performed : The mailboxes will be restored with a backup from 22/08, as well as with new incoming mail after 23/08 21:00 UTC.

Between 22/08 22:00 UTC and 23/08 21:00 UTC, the mails stored during this period were lost.
Between 23/08 21:00 UTC and 24/08 22:38 UTC, the redirections and mailing list do not transmit mails.
Between 23/08 21:00 UTC and 26/08 07:50 UTC, no access to mailboxes.
Between 26/08 07:50 UTC and 26/08 10:51 UTC, progressive restoration of access to mailboxes.

Messages received between 23/08 21:00 UTC and the end of the incident were not lost.
---------------
Heure de début : 23/08/2021 21:00 UTC
Heure de fin : 26/08/2021 10:51 UTC
Impact sur le service : 4026 services indisponibles sur le filerz26 (restauration du service sur le filerz157)
Origine de l'incident : Suite à une maintenance sur le filerz, il y a eu une perte de données entre le 22/08 22:00 UTC et le 23/08 21:00 UTC.
Actions effectuées : Les boîtes mail ont été restaurées avec une sauvegarde du 22/08, ainsi qu'avec les nouveaux mails entrants après le 23/08 21:00 UTC.

Entre le 22/08 22:00 UTC et le 23/08 21:00 UTC, les mails stockés durant cette période ont été perdu.
Entre le 23/08 21:00 UTC et le 24/08 22:38 UTC, les redirections et mailing list ne transmettent pas les mails.
Entre le 23/08 21:00 UTC et le 26/08 07:50 UTC, pas d'acces aux boites mails.
Entre le 26/08 07:50 UTC et le 26/08 10:51 UTC, restauration progressive des accès aux boites mails.

Les messages reçu entre le 23/08 21:00 UTC et la fin de l'incident n'ont pas été perdu.

Date: 2021-08-26 09:07:38 UTC
Start time : 23/08/2021 21:00 UTC
Service impact : 8146 mailboxes unavailable on filerz26
Root cause : Due to maintenance on the filerz, there was a loss of data between 22/08 22:00 UTC and 23/08 21:00 UTC.
Ongoing actions : The mailboxes will be restored with a backup from 22/08, as well as with new incoming mail after 23/08 21:00 UTC.
Next update max : 27/08/2021 14:30 UTC
Comment : We have already restored 3.3TB of 3.5TB in total. In addition, the data will be migrated to Filerz157 on GRA. We continue to work on it, we apologise for any inconvenience caused

-------
Heure de début : 23/08/2021 21:00 UTC
Impact sur le service : 8146 boites mails indisponibles sur le filerz26
Origine de l'incident : Suite à une maintenance sur le filerz, il y a eu une perte de données entre le 22/08 22:00 UTC et le 23/08 21:00 UTC.
Actions en cours : Les boîtes mail vont être restaurées avec une sauvegarde du 22/08, ainsi qu'avec les nouveaux mails entrants après le 23/08 21:00 UTC.
Prochaine mise à jour max : 27/08/2021 14:30 UTC
Commentaire : Nous avons déjà restauré 3,3To sur 3,5To au total. De plus les données seront migrées vers le Filerz157 sur GRA. Nous continuons à y travailler, nous nous excusons pour tout désagrément causé.

Date: 2021-08-25 16:19:05 UTC
Start time : 23/08/2021 21:00 UTC
Service impact : 8146 mailboxes unavailable on filerz26
Root cause : Due to maintenance on the filerz, there was a loss of data between 22/08 22:00 UTC and 23/08 21:00 UTC.
Ongoing actions : The mailboxes will be restored with a backup from 22/08, as well as with new incoming mail after 23/08 21:00 UTC.
Next update max : 27/08/2021 14:30 UTC
Comment : We have already restored 605GB of 3.5TB in total. In addition, the data will be migrated to Filerz157 on GRA.
-------
Heure de début : 23/08/2021 21:00 UTC
Impact sur le service : 8146 boites mails indisponibles sur le filerz26
Origine de l'incident : Suite à une maintenance sur le filerz, il y a eu une perte de données entre le 22/08 22:00 UTC et le 23/08 21:00 UTC.
Actions en cours : Les boîtes mail vont être restaurées avec une sauvegarde du 22/08, ainsi qu'avec les nouveaux mails entrants après le 23/08 21:00 UTC.
Prochaine mise à jour max : 27/08/2021 14:30 UTC
Commentaire : Nous avons déjà restauré 605Go sur 3,5To au total. De plus les données seront migrées vers le Filerz157 sur GRA.



Date: 2021-08-25 14:40:51 UTC
Start time : 23/08/2021 21:00 UTC
Service impact : 4096 email services do not have mailbox access on Filerz26
Ongoing actions : The mailboxes will be made available with the new mail from 23/08 at 21:00 UTC.
Next update max : 27/08/2021 14:30 UTC
-------
Heure de début : 23/08/2021 21:00 UTC
Impact sur le service : 4096 emails services n'ont pas d'accès à la boîte aux lettres sur Filerz26
Actions en cours : Les boîtes mail vont être mises à disposition avec les nouveaux courriers depuis le 23/08 à 21:00 UTC.
Prochaine mise à jour max : 27/08/2021 14:30 UTC

Date: 2021-08-25 11:43:45 UTC
Start time : 23/07/2021 21:00 UTC
Service impact : 4096 email services do not have mailbox access on Filerz26
Ongoing actions : The mailboxes will be made available with the new mail from 23/08 at 21:00 UTC.
Next update max : 25/07/2021 14:00 UTC
Comment: We continue to investigate, we apologise for any inconvenience caused
-------
Heure de début : 23/08/2021 21:00 UTC
Impact sur le service : 4096 emails services n'ont pas d'accès à la boîte aux lettres sur Filerz26
Actions en cours : Les boîtes mail vont être mises à disposition avec les nouveaux courriers depuis le 23/08 à 21:00 UTC.
Prochaine mise à jour max : 25/07/2021 14:00 UTC
commentaire: Nous continuons les investigations, nous nous excusons pour la gênes occasioné





Date: 2021-08-24 18:06:15 UTC
Start time : 23/07/2021 21:00 UTC
Service impact : 4096 email services do not have mailbox access on Filerz26
Ongoing actions : The mailboxes will be made available with the new mail from 23/08 at 21:00 UTC.
Next update max : 25/07/2021 12:00 UTC
-------
Heure de début : 23/08/2021 21:00 UTC
Impact sur le service : 4096 emails services n'ont pas d'accès à la boîte aux lettres sur Filerz26
Actions en cours : Les boîtes mail vont être mises à disposition avec les nouveaux courriers depuis le 23/08 à 21:00 UTC.
Prochaine mise à jour max : 25/07/2021 12:00 UTC

Date: 2021-08-24 14:41:27 UTC
Start time : 23/07/2021 21:00 UTC
Service impact : 9030 email services do not have mailbox access on Filerz26
Ongoing actions : The mailboxes will be made available with the new mail from 23/08 at 21:00 UTC.
Next update max : 24/07/2021 18:30 UTC
-------
Heure de début : 23/08/2021 21:00 UTC
Impact sur le service : 9030 emails services n'ont pas d'accès à la boîte aux lettres sur Filerz26
Actions en cours : Les boîtes mail vont être mises à disposition avec les nouveaux courriers depuis le 23/08 à 21:00 UTC.
Prochaine mise à jour max : 24/07/2021 18:30 UTC

Date: 2021-08-23 21:53:27 UTC
A technician is onsite in order to get this resolved.
Posted Aug 23, 2021 - 21:35 UTC