Quando os painéis ficam lentos, os relatórios sobrecarregam a aplicação ou manter os dados de eventos se torna caro demais, o próximo passo é identificar qual carga de trabalho precisa de outra abordagem.
Estes são padrões de casos de uso. A primeira análise verifica se a origem do problema está no banco de dados, no pipeline, na aplicação ou em uma combinação.
Os gráficos atingem timeout, os filtros ficam lentos ou cada novo tenant exige mais relatórios pré-calculados. Avalie uma camada analítica dedicada ao uso do produto e aos relatórios para clientes.
Grandes varreduras e agregações sobrecarregam SQL Server, PostgreSQL ou MySQL. Avalie mover consultas selecionadas de relatórios para uma cópia analítica.
O crescimento significa contas de computação maiores, retenção mais curta ou limites sobre quem pode consultar os dados. Compare o custo total da carga de trabalho em condições realistas de uso.
Logs, rastreamentos e eventos de dispositivos crescem rapidamente, enquanto a amostragem e a retenção curta dificultam as investigações. Projete a retenção de acordo com as perguntas que você precisa responder.
Pedidos, entregas, dispositivos ou transações mudam mais rápido do que os relatórios são atualizados. Defina a decisão que precisa de dados mais atuais e o tempo disponível para agir.
Você precisa explicar qual modelo, cliente ou versão está gerando erros, latência ou gastos. Crie um registro analítico de solicitações, rastreamentos, avaliações e resultados.
O ClickHouse é um banco de dados SQL projetado para análises em grandes conjuntos de dados. Sua adequação depende das consultas e do ciclo de vida dos dados. Leia a introdução oficial .
Você filtra, agrupa ou agrega repetidamente conjuntos crescentes de eventos ou dados de negócio, e a velocidade das consultas, a atualidade ou a concorrência se tornaram um problema relevante.
Sua carga depende de correções frequentes, junções complexas, consistência rigorosa ou isolamento exigente de tenants. Esses requisitos precisam de modelagem e testes explícitos.
Uma pequena carga de relatórios, uma exportação ocasional ou um problema que possa ser resolvido com um índice ou uma alteração de consulta podem ser mais bem tratados no sistema atual. Mantenha transações linha a linha em um sistema transacional adequado.
Algumas frases sobre o problema são suficientes para começar. Você não precisa saber quais recursos do ClickHouse usaria.