Instabilidade no acesso as Lojas Virtuais e Painel Administrativo
Incident Report for Linx Commerce
Postmortem

Indisponibilidade:

Em 22/09/23, o time de engenharia da Linx Commerce identificou uma instabilidade em nossa plataforma que afetou o carregamento dos templates das lojas, resultando em impactos na experiência de navegação dos sites e na entrega de e-mails (tanto no site quanto no painel administrativo). A instabilidade ocorreu entre as 9h52min e as 17h01min. 

Impacto:

Os sites tiveram o carregamento dos templates comprometido, com impacto direto na navegação. Além disso, o disparo das mensagens do produto ficou comprometido em razão da indisponibilidade dos templates. A ausência de e-mails impactou a autenticação no painel administrativo, uma vez que o processo de dupla autenticação não poderia ser completado.

Causa:

A indisponibilidade temporária está relacionada às melhorias de segurança que estamos implementando no Linx Commerce ao longo do ano. Uma das medidas de segurança que implementamos afetou os servidores onde são armazenados os modelos de layout das lojas. A intenção da operação foi estabelecer um sistema de redundância para reforçar a segurança, entretanto, quando da execução da medida alguns arquivos acabaram corrompidos. A fim de solucionar a questão, recorremos ao backup mais estável e recente das lojas, o que resultou em uma recuperação mais demorada.

Solução:

Para solucionar a instabilidade, a equipe de engenharia adotou as seguintes medidas:

  1. Restauração do último backup de todos os templates das lojas e recuperação dos arquivos personalizados mais recentes.
  2. Aumento da capacidade de nossa infraestrutura com a adição de máquinas, visando garantir maior estabilidade dos serviços e a devida redundância em caso de erros na renderização dos templates.  
  3. Implementação de uma rotina de validação dos layouts em todos os ambientes para garantir o funcionamento adequado de todas as aplicações.

Pedimos desculpas pelo inconveniente e agradecemos por sua compreensão durante esse período. Estamos comprometidos em garantir a estabilidade e segurança de nossos serviços, e continuaremos aprimorando nossos processos para evitar transtornos.

Posted Oct 18, 2023 - 14:57 GMT-03:00

Resolved
Prezados,

Estamos encerrando o Status Page.

Para garantir uma total estabilidade da nossa aplicação, iremos seguir monitorando.

Agradecemos novamente pela paciência e compreensão.
Posted Sep 22, 2023 - 23:15 GMT-03:00
Monitoring
Prezados,

Depois de um longo período de trabalho, nossas lojas virtuais estão normalizadas.

Estamos monitorando cuidadosamente para garantir a total estabilidade do serviço.

Caso você valide qualquer tipo de inconsistência, por favor, entre em contato com o nosso time de Relacionamento com o cliente.

Sobre o nosso painel administrativo, seguimos com o time atuando.

Agradecemos imensamente pela paciência e compreensão de todos vocês.
Posted Sep 22, 2023 - 17:01 GMT-03:00
Update
Prezados,

Continuamos nossa ação e, nesse momento, já temos parte dos nossos clientes com a operação sendo normalizada. Seguiremos trabalhando até que todos estejam 100%

Reiteramos nossas sinceras desculpas por qualquer inconveniente causado.
Posted Sep 22, 2023 - 15:43 GMT-03:00
Update
Prezados,

Prosseguimos com dedicação, contando com a expertise de nossa equipe de Engenharia, para a plena recuperação do serviço.
Posted Sep 22, 2023 - 14:29 GMT-03:00
Update
Prezados,

Durante nossos esforços para resolver a instabilidade, nossa equipe de Engenharia identificou um problema adicional que está afetando algumas funcionalidades no painel administrativo. Sendo uma delas a autenticação em dois fatores.

Estamos trabalhando incansavelmente para estabilizar o serviço o mais rápido possível e pedimos desculpas pelos transtornos causados.

Agradecemos pela sua compreensão enquanto trabalhamos para resolver essas questões.
Posted Sep 22, 2023 - 12:27 GMT-03:00
Update
Prezados,

Desejamos informar que nossa equipe técnica continua investigando a instabilidade que afeta as lojas virtuais. Lamentamos qualquer inconveniente causado e estamos trabalhando diligentemente para resolver essa situação o mais rapidamente possível.

Agradecemos pela sua compreensão e paciência durante este período.
Posted Sep 22, 2023 - 11:22 GMT-03:00
Update
Prezado cliente,

Nosso time de Engenharia segue atuando na investigação do problema.

Desde já, pedimos desculpas pelo transtorno.
Posted Sep 22, 2023 - 10:49 GMT-03:00
Investigating
Prezados,

Estamos enfrentando uma instabilidade no acesso à loja virtual, impactando na navegação e na finalização de pedidos.

Nosso time de Engenharia encontra-se atuando para estabelecer o serviço o mais rápido possível.
Posted Sep 22, 2023 - 09:52 GMT-03:00
This incident affected: Linx Commerce (Loja, Carrinho / Checkout, Sistema de Busca, Painel Administrativo, Cotação de Frete Commerce).