Colocation ou cloud: um guia prático para trading

Fileiras de racks de servidores ilustram as opções de colocation e cloud para a infraestrutura de trading
Photo by panumas nikhomkhai on Pexels

Cloud não é automaticamente mais barata que colocation. Para um broker ou uma prop firm, a pergunta útil é quais cargas de trabalho se beneficiam da proximidade física e quais ganham mais com capacidade elástica, serviços gerenciados ou recuperação mais fácil.

São modelos operacionais diferentes, não respostas opostas a uma única questão de arquitetura. Uma stack de trading pode usar ambos, desde que os caminhos de rede, os limites de falha e as responsabilidades estejam claros. Comece medindo o serviço que importa, em vez de comparar uma instância de cloud com um rack em uma tabela de preços.

Meça o caminho, não o rótulo da plataforma

Colocation significa instalar equipamentos em um data center usado por uma bolsa ou venue de liquidez e conectá-los por meio de um cross-connect ou outra rede aprovada. Isso pode reduzir a distância física entre o gateway de um broker's e o venue. Não garante uma confirmação rápida de ordem: o processamento da bolsa, os controles de risco, os switches, o gerenciamento de sessão e o caminho de retorno contribuem para o resultado.

As regiões de cloud oferecem outro conjunto de controles. As equipes podem provisionar capacidade computacional rapidamente, automatizar a implantação e distribuir serviços entre zonas de disponibilidade. Mas uma região de cloud não fica necessariamente dentro de um data center de bolsa.

Um circuito privado pode aumentar a previsibilidade, enquanto o roteamento pela internet pública pode mudar. Uma conexão gerenciada de cloud também não elimina a necessidade de testar o caminho completo até cada venue.

Defina timestamps em cada limite: decisão da estratégia, aprovação de risco, envio pelo gateway, recebimento pelo venue quando disponível, recebimento da confirmação e atualização para o cliente. Sincronize os relógios com PTP quando houver suporte, registre a fonte do relógio e monitore o desvio. Compare p50, p99 e p99.9, além da perda de pacotes e do comportamento em reconexões. Uma média de latência esconde a cauda que gera reclamações e incidentes operacionais.

Certifique-se de que a comparação use o mesmo protocolo, tamanho de mensagem, sessão de mercado e carga. Informe separadamente o RTT de rede entre gateway e venue e o tempo entre o envio da ordem pela aplicação e sua confirmação. Se os dados vierem de pontos diferentes de timestamp, não se trata de uma comparação equivalente.

Use faixas típicas como primeiro filtro

As faixas a seguir são valores típicos de mercado para RTT de rede, não garantias de serviço. Os resultados reais variam conforme a instalação, a operadora, a rota, os equipamentos e o venue. Elas descrevem apenas os caminhos de rede, não o tempo total para validar, processar e confirmar uma ordem.

Padrão de implantaçãoFaixa típica de RTT de mercadoVariabilidade típicaIndicação inicial
Cross-connect dentro da instalação do venue10-100 microssegundosBaixa, se o caminho e os equipamentos forem controladosGateways sensíveis à latência e captura de dados de mercado
Rede privada na mesma área metropolitana0.2-2 milissegundosBaixa a moderada, dependendo da operadora e da rotaServiços de risco e componentes conectados do broker
Região de cloud até um venue externo na mesma área metropolitana1-5 milissegundosModerada; teste a conexão e a zona escolhidasServiços de execução não críticos e sistemas regionais
Caminho de cloud entre regiões20-80 milissegundosModerada a alta, dependendo da distância e do roteamentoRecuperação, relatórios e replicação assíncrona

Use as faixas para decidir o que testar, não para aprovar um projeto. Meça pelo menos várias horas de tráfego normal e um período movimentado representativo.

Inclua picos, reconexões e failover. Para caminhos de execução, capture timestamps em nível de pacote ou de hardware quando disponíveis; apenas os logs da aplicação podem introduzir ruído de agendamento e buffering.

As comparações de custo exigem o mesmo rigor. Cotações típicas de mercado podem colocar uma pequena estrutura de colocation na faixa dos milhares baixos de dólares americanos por mês, enquanto uma cage privada, vários cross-connects e circuitos redundantes podem chegar a cinco dígitos. Um ambiente de cloud estável também pode custar de alguns milhares a dezenas de milhares de dólares por mês, dependendo do tamanho das instâncias, da redundância, do armazenamento, das licenças e da transferência de rede.

Essas são faixas para planejamento, não cotações. Inclua instalação, suporte remoto, energia, compromissos de circuito, suporte, tráfego de saída e tempo de engenharia.

Aloque as cargas de trabalho conforme suas restrições

Divida a stack de acordo com o impacto do atraso, o nível de controle necessário sobre o hardware e o valor da capacidade elástica. Uma primeira avaliação simples é:

  • Gateways conectados ao venue: Coloque as sessões mais sensíveis à latência perto do venue quando o RTT medido, o jitter ou o controle da rota afetarem materialmente a estratégia de trading. Mantenha clara a responsabilidade pela sessão e pela recuperação de sequência.
  • Captura e normalização de dados de mercado: Faça a captura em colocation quando a perda de pacotes, o tratamento de picos ou a latência do feed exigirem isso. Replique os dados normalizados para o armazenamento em cloud para analytics e replay, em vez de enviar todos os consumidores por um único link limitado.
  • Risco pré-trading: Mantenha a decisão de risco síncrona em um caminho com um orçamento de latência testado e uma ação de falha definida. Uma dependência remota que acrescente vários milissegundos ou falhe em modo fechado pode mudar o tratamento de ordens durante um mercado movimentado.
  • Research, back-testing e jobs em lote: Use capacidade de cloud quando os jobs puderem ser enfileirados, escalados e interrompidos. Estabeleça limites para famílias de instâncias, retenção de armazenamento e tráfego de saída de dados. A capacidade computacional elástica só é útil se os recursos ociosos forem de fato liberados.
  • APIs para clientes, relatórios e ferramentas internas: Em geral, esses serviços são adequados à implantação em cloud, sujeitos a requisitos de residência de dados, controles de acesso e níveis de serviço. Mantenha-os separados do domínio de falha da execução crítica.

Mantenha o caminho crítico curto e observável. Se uma ordem viajar de um gateway em colocation para um serviço de risco em cloud e voltar, o salto de rede passa a fazer parte do caminho da ordem. Meça-o sob carga e durante mudanças de rota. Se o controle puder ser executado localmente, com limites sincronizados e tratamento seguro de estado, compare também esse projeto.

Um projeto híbrido acrescenta limites que precisam ser operados. Defina qual sistema é responsável pelo estado da ordem, o que acontece quando a replicação atrasa e qual lado pode aceitar novas ordens após uma partição. Use tokens de fencing ou outro mecanismo explícito de responsabilidade para impedir que dois gateways enviem ordens da mesma sessão's. Para saber mais sobre as opções de infraestrutura por trás das plataformas de trading, consulte a cobertura de infraestrutura da Trading Technology.

Compare custos operacionais e modos de falha

Elabore um modelo de custos de três anos para cada implantação, usando o mesmo perfil de tráfego e a mesma meta de disponibilidade. Para colocation, inclua cobranças de rack ou gabinete, energia, cross-connects, circuitos redundantes, renovação de hardware, peças sobressalentes, suporte remoto e viagens. Acrescente o custo de manter uma equipe capaz de diagnosticar falhas em switches, NICs ou cabos fora do horário comercial local.

Para cloud, inclua capacidade computacional em condições normais e de pico, capacidade reservada, armazenamento, snapshots, logs, suporte, conectividade privada e transferência de dados. Um ambiente de recuperação mantido aquecido custa mais que um provisionado sob demanda, mas uma implantação sob demanda pode demorar demais ou falhar durante um incidente regional. Teste o tempo de recuperação, em vez de presumir que a infraestrutura como código a torna imediata.

A redundância entre zonas de disponibilidade não é o mesmo que recuperação de desastres entre regiões. Uma implantação distribuída entre zonas ainda pode compartilhar uma região, um plano de controle ou uma dependência de rede externa.

Instalações de colocation podem compartilhar uma operadora, um gateway de venue, uma concessionária de energia ou uma equipe operacional. Desenhe essas dependências no diagrama de serviços e teste pelo menos uma falha em cada categoria relevante.

Defina os objetivos de serviço antes de transferir uma carga de trabalho. Por exemplo, um serviço de execução pode ter uma meta de disponibilidade mensal de 99.95%, com um objetivo de tempo de recuperação de minutos e um objetivo de ponto de recuperação de zero ordens aceitas perdidas. Esses números são parâmetros de projeto, não garantias do setor. Um serviço de research pode tolerar um tempo de recuperação muito maior e a perda de parte do trabalho intermediário.

Acompanhe os custos unitários junto com as métricas de serviço: custo por milhão de mensagens de dados de mercado, por sessão ativa de cliente ou por milhão de ordens processadas. Monitore a latência p99, os pacotes descartados, as ordens rejeitadas, a profundidade da fila e o tempo de failover no mesmo dashboard. Uma implantação mais barata que excede o orçamento de latência na carga de pico não é uma otimização.

Valide o projeto antes de redirecionar o tráfego

Faça uma comparação controlada com a mesma versão e configuração do software em cada local. Envie tráfego semelhante ao de produção por sessões de teste ou por uma ferramenta de replay, incluindo tamanhos de pico, ordenação de mensagens e padrões de reconexão. Teste o caminho desde o momento em que a aplicação cria uma mensagem até o momento em que recebe a confirmação.

Registre a linha de base, o ganho esperado e o gatilho para reverter a mudança. Altere uma variável por vez: rota de rede, tipo de host, zona, configuração do kernel ou localização da aplicação.

Mantenha um pequeno grupo canário quando possível. Não migre todas as sessões de uma vez se isso puder causar lacunas de sequência, ordens duplicadas ou grande impacto para os clientes.

Antes da migração, simule a perda do link primário, a reinicialização de um host, uma falha de zona de cloud e a desconexão de um venue. Confirme o envio de alertas, a responsabilidade pelo escalonamento e o procedimento para reconciliar o estado das ordens.

Verifique se o monitoramento continua funcionando durante a falha testada. Um alerta roteado pelo componente que acabou de falhar não é um controle útil.

Reavalie a decisão de alocação após mudanças relevantes na conectividade com venues, no volume de tráfego, nos requisitos da estratégia ou nos preços de cloud. Mantenha as medições e premissas junto ao registro de arquitetura. Para mais informações sobre plataformas e provedores, leia a Trading Technology.

Pare de fazer o seguinte:

  • Pare de escolher uma plataforma com base em um número de destaque de latência ou no preço da capacidade computacional.
  • Pare de tratar o RTT de uma região de cloud como equivalente ao de um cross-connect com um venue.
  • Pare de chamar um projeto de resiliente antes de testar suas dependências compartilhadas.
  • Pare de transferir tráfego crítico sem um gatilho de reversão baseado em medições.

Perguntas frequentes

Colocation é sempre mais rápida que cloud para trading?

Não. Um cross-connect em uma instalação de venue pode ter um RTT de rede muito baixo, mas o processamento da aplicação e o caminho de retorno também importam. Meça todo o caminho da ordem e seu comportamento p99 em comparação com a conexão de cloud considerada.

Um broker pode operar a infraestrutura de trading em colocation e em cloud?

Sim. Uma divisão comum coloca gateways sensíveis à latência ou a captura de dados de mercado perto dos venues, enquanto serviços de research, relatórios e recuperação ficam em cloud. O projeto precisa definir claramente a responsabilidade pelo estado das ordens e testar o comportamento durante partições de rede.

O que uma equipe de trading deve medir antes de migrar para cloud?

Meça o RTT entre gateway e venue, a latência entre o envio da ordem pela aplicação e sua confirmação, o jitter, a perda de pacotes e o desempenho durante picos. Teste também reconexões e failover e compare o custo mensal total, incluindo transferência de dados, conectividade privada, armazenamento e suporte.