Dans la soirée du vendredi 29 juin, Amazon Web Services (AWS) a connu une panne majeure sur son site de Virginie du Nord. en raison d'une perte de puissance . Cette panne, la deuxième En juin, de nombreux clients AWS utilisant PagerDuty ont été touchés. PagerDuty étant également client AWS, nous sommes heureux de vous informer que nous avons résisté à la tempête et n'avons subi aucune interruption de service.

Alors que nous nous efforçons de maintenir notre niveau de support client et de transparence à son plus haut niveau, nous aimerions récapituler brièvement les événements de la soirée, ce que nous avons fait pour résoudre et ce que nous continuons de faire pour garantir que vos services d'alerte via PagerDuty soient ininterrompus au mieux de nos capacités.

Ce que PagerDuty a vu

Le vendredi 29 juin à 20h06 (heure du Pacifique), notre système a détecté une augmentation inhabituelle du nombre d'alertes sur la plateforme PagerDuty . Selon l'analyse d'Amazon, « environ 7 % des instances EC2 de la région US-EAST-1 se trouvaient dans la zone de disponibilité impactée et ont été affectées par la panne de courant. »

Les pics d'alerte notables qui nous ont fait prendre conscience de l'événement AWS sont ci-dessous :

Augmentation d'environ 20 fois du trafic en raison d'une panne AWS. (Le deuxième pic coïncide avec l'ajout d'une seconde intercalaire à l'UTC et n'est probablement pas lié).

Comme mentionné dans notre Article de blog du 18 juin , après la première panne d'AWS en juin 2012, nous avons fait et faisons ce qui suit pour garantir la disponibilité de PagerDuty pour nos clients :

Centres de données migrés d'AWS US-East vers US-West :
Cette migration de centre de données a été réalisée le 19 juin 2012. L'objectif était de dissocier nos défaillances de celles de nos clients. Autrement dit, il n'était évidemment pas judicieux pour nous d'utiliser la même infrastructure qu'une grande partie (plus de 20 %) de nos clients. C'est pourquoi nous avons quitté la région Est des États-Unis.

Chez PagerDuty, nous prenons en charge toutes les questions liées à la disponibilité de nos services très sérieusement. Pour toute question ou préoccupation, n'hésitez pas à nous contacter à support@pagerduty.com .