Upgrade to Pro — share decks privately, control downloads, hide ads and more …

Movendo 15 Tb de dados de um estado para outro

Movendo 15 Tb de dados de um estado para outro

Movemos 15 Tb de dados durante uma troca de datacenter do Rio Grande do Sul para São Paulo, 2 meses antes da Black Friday de 2021. Esta operação foi planejada com meses de antecedência, para que na hora da virada nada desse errado. De fato, a virada foi feita em apenas três horas, com apenas alguns momentos de downtime durante este período. Como planejamos e executamos esta tarefa? Como essa montanha de dados foi movimentada entre três dataceters? Como nossos servidores Postgres se comportaram na Black Friday seguinte?

Rodrigo de Avila

August 27, 2022
Tweet

More Decks by Rodrigo de Avila

Other Decks in Technology

Transcript

  1. Agenda • Como estava, e como deveria ficar? • Fase

    1: Planejamento • Fase 2: Movimentação de servidores e dados • Fase 3: Alteração de rotas • Fase 4: Troca de datacenter • Fase 5: Transporte dos demais servidores • Comportamento na Black Friday
  2. Como estava POA01 Dell PowerEdge R740xd 96 threads 512Gb RAM

    3Tb NVME 8 Tb SSD psql 9.6.23 POA01 psql prim psql sec
  3. Comportamento na Black Friday Nosso termômetro de sucesso/fracasso do projeto

    seria a próxima Black Friday, em Novembro de 2021. 0 Incidentes Nenhum incidente registrado durante toda a semana da Black Friday 3x Tráfego Comparado com histórico anterior, nosso tráfego aumentou bastante. Este foi uma prova de fogo para a nova arquitetura ∞ Aprendizado Muitas situações novas, tempo para organizar a plataforma, mudar automações, ver novas possibilidades