OVHcloud Web Hosting Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
Infrastructure de stockage
Scheduled Maintenance Report for Web Cloud
Completed
Nous observons des lenteurs et timeouts sur le cluster de stockage, nous ajoutons de la capacité

Update(s):

Date: 2016-05-23 16:06:38 UTC
Nous avons à nouveau forcé le mécanisme de rebalance (le 14 mai) pour équilibrer la charge entre les noeuds du cluster. Nous avons observé un fort impact en terme de performances (timeouts/ erreurs 500) entre le 14 et le 18 mai, la situation s'améliore petit à petit depuis. Nous avons augmentés certains seuils de timeouts afin de limiter le stress sur l'infrastructure

Date: 2016-05-04 14:17:50 UTC
Nous avons mis à jour la version de Swift de v2.5 (Openstack Liberty) vers 2.7 (Openstack Mitaka) afin d'améliorer la stabilité en Erasure Code

Date: 2016-04-01 10:20:40 UTC
Nous avons proddé une modification afin d'accélérer la répartition des données sur les nouveaux serveurs, ce qui impacte actuellement fortement les performances du cluster mais permettra de retrouver plus rapidement une situation satisfaisante

Date: 2016-03-17 09:07:01 UTC
L'ajout de serveurs dans un cluster implique que les données sont déplacées sur les nouveaux serveurs pour répartir l'occupation de l'espace disque.

Dans les versions précédentes de Swift, rsync était utilisée. Pour l'Erasure Coding, un nouveau protocole est utilisé, developpé spécialement pour Swift : SSYNC. Nous constatons que ce protocole est extrèmement lent. Après avoir discuté avec les core-dev de Swift, ils ont confirmé que le protocole est connu pour avoir des problèmes de performance dans les grands cluster en Erasure Coding, or le notre serait un des plus grands dont ils ont connaissance.

Nous sommes actuellement en train de chercher à optimiser le déplacement des données afin de pouvoir aggrandir les clusters dans des délais raisonnable.

Date: 2016-03-14 17:06:34 UTC
Nous avons ajouté des serveurs de stockage dans le cluster. Les données sont en cours de ré-équilibrage (rebalance), que qui impactera les performances le temps de l'opération
Posted Mar 11, 2016 - 10:17 UTC