Incident en cours impactant les paiements
Incident Report for Payplug
Resolved
This incident has been resolved.
Posted Apr 27, 2023 - 18:06 CEST
Update
Bonsoir,
Nous vous confirmons que tous les services sont désormais opérationnels.
Nous pouvons considérer que l'incident est entièrement résolu.
Nous restons vigilants et continuons à monitorer activement l'activité de la plateforme.
Un post-mortem concernant cet incident sera prochainement publié.
Nous vous présentons nos excuses pour la gêne occasionnée.
Posted Apr 27, 2023 - 18:06 CEST
Update
Bonjour,
Nous souhaitions vous informer des dernières évolutions sur la reprise de notre service.
Depuis hier, notre priorité a été de rétablir le plus rapidement possible le fonctionnement des paiements.

Nous vous confirmons que depuis hier soir, les services de paiement sont opérationnels.

Nos équipes ont été mobilisées pour remettre en place l’ensemble des autres services et nous vous informerons au long de la journée de l’évolution de la situation.

Ce qui est déjà opérationnel :
- Paiements, remboursements en ligne
- Paiements en magasin
- Portail

Ce qui n’est pas encore opérationnel (remise en service en cours) :
- Télécollecte des paiements en magasin
- Exports comptables
- Virements quotidiens

N’hésitez pas à consulter cette page Status pour obtenir les dernières informations à jour.
Toute l’équipe est consciente de l’importance d’une résolution rapide et se tient à votre disposition pour vous accompagner et répondre à vos questions.
Merci pour votre compréhension tout au long de la journée d’hier.

L’équipe Payplug



English version
We wanted to inform you about the latest developments regarding the resumption of our service. Since yesterday, our priority has been to restore payment functionality as quickly as possible.

We confirm that since last night, payment services are operational.

Our teams have been fully involved to restore all other services, and we will keep you informed throughout the day of the situation's progress.

What is already operational:
- Online payments and refunds
- In-store payments
- Portal

What is not yet operational (restoration in progress):
- In-store payment collection
- Accounting exports
- Daily transfers

Feel free to check this Status page for the latest up-to-date information. The entire team is aware of the importance of a quick resolution and is at your disposal to support you and answer your questions.
Thank you for your understanding throughout yesterday.

The Payplug team
Posted Apr 27, 2023 - 10:46 CEST
Update
Bonsoir,

Nous vous confirmons que nos services de paiement reviennent progressivement à la normale.
L’ensemble de nos équipes restent mobilisées afin de maintenir la stabilité de la plateforme.
Nous vous invitons à suivre les évolutions de la situation sur cette page status.

Nous souhaitons également revenir plus en détail sur les événements de la journée. Ils feront également l’objet d’un post mortem que nous vous partagerons prochainement ainsi que les actions correctives mises en place afin de préserver la qualité de notre service.

Que s’est-il passé ?
Depuis ce matin 8h26, les services de paiement de Payplug ont été interrompus suite à l’incident de Google Cloud Platform qui touche la région de Paris.

Un incident dans un datacenter où est située une partie de la région cloud de Google en France a déclenché une réaction en chaîne entraînant une interruption de services informatiques. Sur les conseils de Google Cloud , nous avons priorisé la migration de toutes nos données vers une autre région, et ce au-delà des anticipations et de l'hébergement multi-zonal prévu dans le cadre de notre plan de sécurité informatique.

Si l’ensemble des données de Payplug sont hébergées au sein d’une même région, précisons qu’elles n’étaient pas hébergées au même endroit mais bien dans 3 groupes de datacenters différents, et que notre Plan de Secours Informatique ne prévoyait pas l’interruption simultanée des 3 environnements.

Les medias se sont par ailleurs fait l'écho des différents acteurs impactés par cet incendie près de Paris au-delà de ceux de Google Cloud : https://www.bfmtv.com/tech/cybersecurite/lille-cannes-courbevoie-un-incendie-dans-un-centre-de-serveurs-paralyse-des-sites-web-de-grandes-villes_AV-202304260428.html ou https://www.lemondeinformatique.fr/actualites/lire-google-cloud-sous-l-eau-suite-a-un-incendie-chez-global-switch-clichy-90281.html


Plan de Continuité d’Activité :
Dans le cadre de notre plan de continuité d’activité, une cellule de crise est active depuis ce matin sous la supervision d’Antoine Grimaud, notre CEO. Nous avons mobilisé toutes nos ressources afin de travailler à la mise en place d’une solution technique et de répondre aux questions de nos marchands et de nos partenaires.


Rétablissement des services :
A l’heure qu’il est, des serveurs de bases de données ont été créés sur la région Belgique et la migration des données de production essentielles au processing est terminée. La réactivation des services devrait avoir lieu de manière progressive au plus vite.

Toutes les équipes sont pleinement mobilisées, l'urgence étant la stabilisation de l’ensemble de notre service. Nous sommes désormais confiants que la situation se stabilise et nous allons monitorer de près l’ensemble de notre infrastructure.

Pour suivre en temps réel l’évolution de la situation pour Payplug, retrouvez notre page status.
Pour retrouver les éléments communiqués par Google Cloud Platform à propos de l’incident, rejoignez la page status de l’incident : https://status.cloud.google.com/incidents/dS9ps52MUnxQfyDGPfkY
Posted Apr 26, 2023 - 20:43 CEST
Monitoring
Les paiements commencent à repasser sur notre plateforme.
Nous continuons à monitorer activement l'état du service.
Nous vous tiendrons informés dans la soirée sur l'évolution de la situation.
Posted Apr 26, 2023 - 20:05 CEST
Update
L'incident est toujours en cours chez notre prestataire Google Cloud Platform.
La reprise progressive du trafic est toujours estimée entre 18h30 et 19h30.
Nous vous tiendrons informés dès que de nouveaux éléments seront disponibles.
Posted Apr 26, 2023 - 19:01 CEST
Update
L'incident est toujours en cours chez notre prestataire Google Cloud Platform.
Nous sommes entièrement mobilisés en collaboration avec les équipes de Google sur la mise en place d'une solution alternative.
La reprise progressive du trafic est maintenant estimée entre 18h30 et 19h30.
Nous affinerons cette estimation à 19h00 ou dès que de nouveaux éléments seront disponibles.
Posted Apr 26, 2023 - 18:05 CEST
Update
L'incident est toujours en cours chez notre prestataire Google Cloud Platform.
Nous sommes entièrement mobilisés en collaboration avec les équipes de Google sur la mise en place d'une solution alternative.
La reprise du trafic est maintenant estimée à 18h30.
Nous affinerons cette estimation à 18h00.
Posted Apr 26, 2023 - 17:02 CEST
Update
L'incident est toujours en cours chez notre prestataire Google Cloud Platform.
Nous sommes entièrement mobilisés en collaboration avec les équipes de Google sur la mise en place d'une solution alternative.
La reprise du trafic est maintenant estimée à 18h30.
Nous affinerons cette estimation à 17h00.
Posted Apr 26, 2023 - 16:02 CEST
Update
L'incident est toujours en cours chez notre prestataire Google Cloud Platform.
Nous sommes entièrement mobilisés en collaboration avec les équipes de Google sur la mise en place d'une solution alternative.
La reprise du trafic est toujours estimée à 17h00.
Nous affinerons cette estimation à 16h00.
Posted Apr 26, 2023 - 15:02 CEST
Update
L'incident est toujours en cours chez notre prestataire Google Cloud Platform.
Nous sommes entièrement mobilisés en collaboration avec les équipes de Google sur la mise en place d'une solution alternative.
La reprise du trafic est toujours estimée à 17h00.
Nous affinerons cette estimation à 15h00.
Posted Apr 26, 2023 - 14:01 CEST
Update
L'incident est toujours en cours chez notre prestataire Google Cloud Platform.
Nous travaillons en collaboration avec leurs équipes pour que nos serveurs soient migrés le plus rapidement possible vers des régions non impactées par l'incident.
Notre nouvelle estimation sur la reprise du trafic est établie à 17h00.
Nous affinerons cette estimation à 14h00.
Posted Apr 26, 2023 - 13:02 CEST
Update
Nous revenons vers vous concernant l’incident en cours chez notre prestataire Google Cloud Platform.
Nous sommes en train de migrer nos serveurs vers d’autres régions non impactées par l’incident.
Nos équipes techniques mettent tout en oeuvre afin de trouver une solution et nous espérons une reprise du trafic vers 15 heures environ. Nous affinerons cette estimation à 13h00.
Nous vous présentons nos excuses pour la gêne occasionnée.
Posted Apr 26, 2023 - 12:02 CEST
Update
Nous revenons vers vous concernant l'incident en cours chez notre prestataire Google Cloud Platform.
Leurs équipes travaillent activement sur la résolution de l'incident. Malheureusement nous avons eu confirmation que leur data center ne pourra pas être remis en service avant midi au plus tôt.
Nous recherchons activement des alternatives et nous sommes en train de transférer nos serveurs vers d'autres data centers non impactés par l'incident.
Nous ferons une nouvelle mise à jour ce midi concernant l'évolution de la situation.
Posted Apr 26, 2023 - 10:49 CEST
Update
Bonjour,

Nous subissons toujours actuellement une interruption du service liée à Google Cloud qui touche toute la région Europe west9 (Paris) : https://status.cloud.google.com/incidents/dS9ps52MUnxQfyDGPfkY#73mBtVKKfeJGJ1yaY7hV

Leurs serveurs sont actuellement inaccessibles. Nos équipes techniques sont en train de basculer en urgence sur nos autres solutions possibles.

Encore toutes nos excuses pour la gêne occasionnée.

L'équipe Payplug
Posted Apr 26, 2023 - 09:54 CEST
Identified
Bonjour,

Nous constatons une interruption du service lié à l'un de nos prestataires d'hébergement : https://status.cloud.google.com/incidents/dS9ps52MUnxQfyDGPfkY#73mBtVKKfeJGJ1yaY7hV

Nos équipes techniques travaillent pour trouver une alternative.

Toutes nos excuses pour la gêne occasionnée.

L'équipe Payplug
Posted Apr 26, 2023 - 08:51 CEST
This incident affected: API de Paiement | Payment API and Paiement en magasin.