Feeds de dados de mercado: quanto custa cada tick

Engenheiro analisa o desempenho de um feed de dados de mercado em um painel de trading
Photo by Aedrian Salazar on Pexels

Ao fim de uma semana ruim, um responsável por operações olha para um painel que mostra cotações atrasadas, pacotes perdidos e uma fatura de vendor que voltou a subir. O feed em si pode estar funcionando bem. O custo fica espalhado entre licenças de bolsas, conectividade, processamento, horas de suporte e atualizações perdidas ocasionalmente.

Um tick não é uma unidade de valor padronizada. Pode significar uma negociação, uma alteração na melhor oferta de compra ou venda, ou uma mensagem do livro de ofertas. A comparação correta começa pela definição das atualizações de que a estratégia ou o cliente realmente precisa, seguida da medição do custo total para entregá-las.

Meça a atualização útil, não o preço anunciado

O preço dos feeds geralmente combina várias cobranças. As bolsas podem cobrar por mercado, produto de dados, assinante, dispositivo, status profissional e uso.

Um broker que distribui dados a clientes pode ter obrigações diferentes das de uma prop firm que os consome internamente. O uso não exibido, os dados derivados e a redistribuição podem alterar as condições da licença. Confirme as definições com o mercado ou distribuidor autorizado antes de projetar os custos.

Para planejar a infraestrutura, separe a fatura em quatro partes: direitos de consumo ou redistribuição dos dados, serviço de feed, rede e hospedagem, e o trabalho necessário para operá-lo. Uma taxa mensal baixa pelo feed pode não compensar se não incluir profundidade, exigir uma camada cara de normalização ou deixar sua equipe responsável pela recuperação e reprodução dos dados.

Entre as métricas úteis estão custo por instrumento ativo, custo por usuário licenciado, custo por milhão de atualizações utilizáveis e custo por unidade de latência. As duas últimas exigem cuidado. Um feed consolidado pode enviar menos mensagens, mas descartar alterações intermediárias do livro. Um feed bruto pode carregar mais atualizações do que a estratégia consegue processar. Conte as atualizações consumidas pelo aplicativo e registre se o feed preserva números de sequência, profundidade e timestamps.

Pague pela informação que seu sistema consegue usar, não pela contagem de mensagens na fatura.

Por exemplo, um fluxo constante de 20,000 atualizações por segundo durante uma sessão de 6.5 horas equivale a cerca de 468 milhões de atualizações por dia, antes de incluir picos ou outros mercados. Esse cálculo ajuda a estimar largura de banda e processamento, mas não é uma previsão de um mercado específico. Use o tráfego de pico capturado para planejar a capacidade e a definição do produto licenciado para fins de cobrança.

Quatro formas de receber um tick

As principais opções diferem quanto ao local em que o feed é decodificado, a quem cabe gerenciar a conexão e ao nível de controle que permanece com sua equipe. Os valores abaixo são faixas típicas de planejamento para uma implantação modesta, não cotações. Os custos técnicos mensais não incluem licenças de dados das bolsas nem a equipe interna; as condições reais variam conforme o mercado, a localização, a redundância e o acordo comercial.

AbordagemCusto técnico recorrente típicoLatência típica de entregaContrapartida operacional
Feed direto do mercado em colocation£2,000-£15,000 por mercado por mês50-500 microssegundos até o aplicativo, em uma configuração bem ajustadaMaior controle; sua equipe é responsável pelos handlers, pela recuperação e pelas mudanças específicas de cada mercado
Feed gerenciado de vendor por cross-connect£500-£5,000 por serviço por mês0.5-5 milissegundosMenos trabalho de integração com os mercados; o escopo do produto e a normalização são definidos pelo vendor
Feed de vendor entregue pela nuvem£300-£4,000 por mês para hospedagem e entrega5-50 milissegundos, dependendo da região e do caminhoImplantação e escalabilidade simples; é preciso monitorar a variação dos custos de saída de dados e o jitter
API de broker ou vendor£0-£1,500 por mês pelo acesso nos planos de entrada mais comuns20-250 milissegundos, com variação maior sob cargaIntegração mais rápida; limites, consolidação e disponibilidade podem restringir o uso em trading

Essas faixas de latência descrevem caminhos típicos desde a publicação ou entrega pelo provedor até um aplicativo, não um nível de serviço garantido. Os pontos de medição são importantes.

O timestamp de um vendor pode marcar o recebimento no gateway, enquanto sua estratégia registra o dado depois da decodificação e do enfileiramento. Compare medidas equivalentes e informe separadamente a mediana, o percentil 99 e a maior latência observada.

Feeds diretos são a opção habitual quando os detalhes do livro de ofertas, o controle de sequência ou a baixa latência justificam os gastos com engenharia e conectividade. Eles chegam em formatos específicos de cada mercado, muitas vezes por multicast, e podem exigir linhas redundantes A e B, detecção de lacunas de pacotes, retransmissão ou recuperação por snapshot. Um handler que aceita uma lacuna sem sinalizá-la pode publicar um livro plausível, mas incorreto.

Um feed gerenciado pode consolidar mercados, normalizar símbolos e cuidar de parte da recuperação. Isso reduz o trabalho de integração, mas verifique se o serviço preserva os timestamps da bolsa, os dados por ordem e as informações de sequência do mercado. A entrega pela nuvem e as APIs são adequadas para research, painéis, monitoramento e fluxos de trabalho menos sensíveis à latência. Não são automaticamente adequadas para execução: cotas, limitação de taxa, localização da região e comportamento em picos podem ter mais impacto do que a latência média.

Some os custos que não aparecem na linha do feed

As cobranças por licenças podem superar os custos de entrega, especialmente quando os dados são redistribuídos ou disponibilizados a muitos usuários. Mantenha um inventário de licenças por mercado, produto, tipo de consumidor e finalidade.

Acompanhe quem pode visualizar os dados, se o dispositivo de um cliente conta como assinante e como os valores derivados são tratados. Uma mudança do uso interno para a exibição ao cliente deve levar a uma revisão, não à suposição de que a licença existente cobre esse uso.

Os custos de infraestrutura também dependem do perfil do tráfego. O multicast pode reduzir o tráfego de rede duplicado quando há muitos consumidores, mas exige um gerenciamento disciplinado dos grupos e do tratamento de perda de pacotes. O unicast simplifica alguns caminhos, mas aumenta a largura de banda e o número de conexões.

Feeds com profundidade podem gerar picos acentuados durante notícias e na abertura dos mercados. Dimensione os buffers de rede e as filas com base nos picos capturados, não na média de mensagens por segundo.

  • Rede: cross-connects, portas, circuitos redundantes, trânsito de internet e saída de dados da nuvem.
  • Processamento: handlers de feed, normalização, montagem do livro, distribuição e armazenamento para reprodução.
  • Resiliência: caminhos secundários, recuperação por snapshot, sincronização de relógios e testes de recuperação de desastres.
  • Operações: mudanças nos mercados, auditorias de permissões, cobertura de incidentes e reconciliação de lacunas de sequência.

O tempo da equipe costuma ser o diferencial oculto. Um feed direto pode exigir um especialista para manter handlers de protocolo e testar mudanças nas bolsas.

Um serviço de vendor transfere parte dessa carga, mas cria uma dependência do cronograma de lançamentos, do processo de suporte e dos relatórios de indisponibilidade. Para uma visão mais ampla das dependências de plataforma e dos modelos operacionais, consulte a cobertura de infraestrutura da Trading Technology.

Escolha de acordo com o uso e o modo de falha

Comece pelo consumidor, não pelo transporte. Um market maker que mantém um livro de ofertas tem requisitos diferentes dos de um broker que exibe preços indicativos em um aplicativo para clientes. Anote os campos necessários, a profundidade, os mercados, a política de atualização, o orçamento de latência e o comportamento de recuperação. Depois, teste se cada opção atende a esses requisitos tanto em condições normais quanto durante um pico.

  1. Defina os dados mínimos: liste instrumentos, mercados, profundidade, campos e se todas as atualizações intermediárias são necessárias.
  2. Estabeleça metas de serviço mensuráveis: especifique os percentis de latência de ponta a ponta, o tempo máximo de recuperação e a duração aceitável de uma lacuna de pacotes.
  3. Calcule o custo de todo o caminho: inclua licenças, conectividade, processamento, suporte, número de usuários, saída de dados e esforço de engenharia.
  4. Reproduza o tráfego capturado: teste picos, lacunas de sequência, reconexões e failover com os consumidores downstream reais.
  5. Compare evidências operacionais: avalie o significado dos timestamps, avisos de incidentes, janelas de mudança, tempo de resposta do suporte e relatórios de permissões.

Use a mesma captura e os mesmos pontos de medição para todas as opções. Um teste útil registra os timestamps da bolsa ou do provedor, a chegada à NIC, a conclusão da decodificação e o consumo pela estratégia.

Isso separa o atraso de rede do tempo em filas e handlers. Também revela situações em que um feed é rápido em média, mas fica para trás durante um pico.

Muitas empresas usam mais de uma abordagem. Um feed direto pode atender à execução sensível à latência, enquanto um feed de vendor normalizado dá suporte a risco, vigilância e exibição para clientes.

Essa arquitetura pode duplicar licenças e armazenamento, portanto defina qual sistema é a fonte oficial para cada uso. Documente o que acontece quando o feed primário se recupera com um histórico de sequência ou timestamps diferente do secundário.

A Trading Technology já abordou as escolhas de plataforma e infraestrutura que moldam essas decisões operacionais. A questão prática é se o controle adicional de um feed direto se paga no seu fluxo de trabalho, e não se ele é tecnicamente mais rápido quando avaliado isoladamente.

Faça com que a próxima decisão possa ser revertida

Não migre um feed de produção com base apenas em um gráfico de latência. Rode a opção candidata em paralelo, compare livros e timestamps e reconcilie lacunas com uma fonte confiável. Defina critérios para a mudança que incluam o comportamento na abertura do mercado, testes de recuperação, aprovação das permissões e um plano de reversão acordado.

Revise o modelo de custos trimestralmente e sempre que adicionar mercados, usuários, produtos ou um novo caminho de redistribuição. Acompanhe as taxas reais de pico de mensagens, a saída de dados, o uso de CPU dos handlers e as horas dedicadas a incidentes, além do número de licenças. Essas métricas mostram se um serviço mais barato continua sendo mais barato depois que o fluxo de trabalho muda.

Se essa fosse minha operação, primeiro mapearia cada feed aos seus consumidores, licenças e tráfego de pico medido. Depois, calcularia o custo de todo o caminho e faria uma captura em paralelo para comparar com o serviço existente antes de alterar a produção.

Perguntas frequentes

O que afeta o custo de um feed de dados de mercado?

Os custos incluem licenças de bolsas, cobranças pelo serviço do vendor, conectividade, hospedagem e suporte de engenharia. Mercado, profundidade do produto, número de usuários, redistribuição e uso não exibido podem alterar o custo total.

Feeds diretos de dados de mercado são sempre mais rápidos que feeds de vendors?

Um feed direto em colocation pode reduzir a latência de entrega, mas o resultado depende do mercado, do caminho de rede, do handler e das filas do aplicativo. Compare percentis medidos de ponta a ponta, não valores anunciados.

Quando um feed de dados de mercado na nuvem é adequado?

A entrega pela nuvem costuma ser adequada para research, monitoramento e exibição para clientes quando uma latência na faixa dos milissegundos é aceitável. Antes de usá-la para execução, verifique a localização regional, as cobranças de saída de dados, a capacidade em picos, o jitter e o comportamento de recuperação do provedor.

Como uma empresa deve estimar o custo por tick?

Defina uma atualização utilizável para o fluxo de trabalho e divida o custo total do caminho do feed pelo número de atualizações utilizáveis no mesmo período. Inclua licenças, infraestrutura e operações, e mantenha métricas separadas para usuários e instrumentos.