Feeds de market data e o custo prático de um tick

Cabos de dados conectando servidores de trading na infraestrutura de market data de um broker.
Photo by Brett Sayles on Pexels

Market data não é um erro de arredondamento em uma estrutura de trading. A fatura da bolsa pode parecer pequena perto de um matching engine ou de uma conta de colocation, mas é apenas um item do custo de produzir um tick utilizável.

Para um broker ou prop firm, esse custo inclui os direitos de consumir ou exibir dados, as conexões que os transportam, o processamento que os normaliza e os sistemas de armazenamento e recuperação que os mantêm disponíveis. Contar apenas as mensagens da bolsa ignora tanto as obrigações comerciais quanto o trabalho de engenharia.

Comece definindo a unidade. Um pacote pode conter várias atualizações, enquanto uma mensagem da bolsa pode representar uma negociação, uma mudança de cotação ou uma alteração na profundidade do livro. Um evento normalizado pode combinar ou descartar mensagens de entrada. Escolha uma unidade consistente, como mensagens de feed aceitas ou atualizações de cotação publicadas, antes de comparar sistemas.

Calcule o custo começando pelos direitos

As tarifas de market data dependem da bolsa, do produto, do uso e da distribuição. Uma tela exibida a um usuário profissional pode ter preço diferente dos dados usados por um algoritmo, um processo de risco ou um painel interno.

Dados derivados e redistribuição podem gerar regras específicas de reporte ou cobrança. É o contrato, não o feed handler, que define o que a empresa pode fazer com cada campo.

Os valores abaixo são faixas típicas de planejamento em USD, não cotações de fornecedores. As tarifas reais variam conforme a bolsa, a classificação do usuário, o método de acesso e o contrato. Use-as como referência para um modelo de orçamento e depois confirme as tabelas e definições atuais com cada bolsa.

Faixas típicas ilustrativas para planejamento mensal

Item de custoFaixa típicaBasePrincipal fator de custo
Licença para exibição profissionalUS$50-US$150Por usuário, por bolsaClassificação do usuário e tarifa da bolsa
Uso não destinado à exibiçãoUS$500-US$10,000Por aplicação ou bolsaCaso de uso, escopo dos dados e termos de reporte
Acesso ao feed ou portaUS$500-US$5,000Por conexão com a bolsaAcesso direto, tipo de porta e nível de serviço
Cross-connect em colocationUS$100-US$500Por conexão, por mêsInstalação e tipo de conexão
Saída de dados da nuvemUS$0.02-US$0.10Por GBProvedor, região e volume de tráfego

As licenças de exibição costumam ser o item mais fácil de contar e também o mais fácil de subestimar. Concilie os relatórios das bolsas com os registros de identidade e os logs das aplicações. Conte os usuários que podem ver dados em tempo real, incluindo as equipes de suporte e operações quando a licença exigir. Para o uso não destinado à exibição, relacione cada feed à aplicação que o consome e registre se ela gera dados derivados ou fornece um serviço externo.

Escolha a arquitetura do feed de acordo com a carga de trabalho

Um feed consolidado reduz o número de conexões com as bolsas e simplifica a normalização. Ele pode atender a um broker que exibe preços de melhor oferta e demanda ou a um serviço de risco que precisa de ampla cobertura.

Feeds diretos oferecem profundidade específica da bolsa e controle sobre o trajeto, aspectos importantes para estratégias sensíveis à latência e análises de execução. Também trazem mais canais, gerenciamento de sequência, lógica de recuperação e administração de licenças.

Feeds ativos de bolsas podem exigir o processamento de dezenas de milhares a várias centenas de milhares de mensagens por segundo, com picos curtos várias vezes maiores. O número depende do conjunto de instrumentos, da profundidade, da sessão e da volatilidade.

Faça testes de desempenho com picos, não apenas nos períodos tranquilos da sessão. Um feed que funciona com uma taxa média ainda pode formar uma fila ou não cumprir os prazos de recuperação quando o mercado se movimenta rapidamente.

Antes de adicionar outro feed direto, avalie estes pontos:

  • Latência: meça o tempo da bolsa ao processo e do processo à publicação na mediana e nos percentis mais altos. O kernel bypass e as threads fixadas podem reduzir a variação da latência, mas aumentam a complexidade operacional e restringem os locais em que o handler pode ser executado.
  • Integridade: use números de sequência, detecção de lacunas e recuperação por snapshot. Uma conexão mais rápida não serve se o livro continuar incompleto após a perda de pacotes.
  • Redundância: caminhos multicast duplos aumentam a resiliência, mas o tratamento de duplicatas, o monitoramento e, às vezes, as tarifas de conexão elevam o custo.
  • Escopo: assine apenas os instrumentos e a profundidade necessários à estratégia, quando as regras da bolsa permitirem. Filtrar depois da interface de rede não impede que o feed consuma largura de banda e capacidade de processamento.

As escolhas de transporte deslocam os custos, não os eliminam. A colocation pode encurtar o trajeto e evitar transferências repetidas pela nuvem, enquanto uma implantação em nuvem pode simplificar a escalabilidade e a distribuição regional. Compare o custo mensal total de portas, cross-connects, processamento, saída de dados e suporte de plantão. Uma tarifa baixa por GB não torna baratos os feeds brutos replicados se cada serviço fizer uma cópia.

Meça o custo por evento utilizável

Use um numerador mensal que inclua tarifas de market data, encargos de acesso, rede, processamento do feed handler, armazenamento, monitoramento e uma parcela alocada das operações. Divida-o pelo número de eventos aceitos efetivamente entregues aos serviços consumidores.

Mantenha um segundo valor para as mensagens brutas de entrada. A diferença entre os dois revela tráfego duplicado, atualizações rejeitadas e escolhas de normalização.

Por exemplo, suponha que um sistema processe 100,000 mensagens aceitas por segundo durante uma sessão de 6.5 horas em 21 dias de negociação. Isso equivale a cerca de 49.1 bilhões de eventos no mês. Se o custo mensal alocado for US$12,000, o resultado será aproximadamente US$0.24 por milhão de eventos, ou US$0.00000024 por evento. Este é um cálculo ilustrativo, não um resultado típico de uma empresa. Se a duração da sessão, a definição de evento ou o custo alocado mudar, o resultado também muda.

Inclua o armazenamento no cálculo. A 100,000 mensagens por segundo e com um tamanho médio de registro bruto de 100 bytes, uma captura sem compressão gera cerca de 864 GB em um dia inteiro. Índices, metadados e réplicas aumentam esse total. Reter todos os feeds indefinidamente raramente é uma escolha neutra; defina a retenção de acordo com o uso, as necessidades de replay e as obrigações regulatórias, depois teste se a compressão e o replay preservam os campos exigidos pelos sistemas seguintes.

Acompanhe estas métricas por bolsa e feed handler:

  • Mensagens aceitas, descartadas, duplicadas e rejeitadas, além da contagem de lacunas e recuperações.
  • Taxa máxima de mensagens, profundidade da fila, uso de CPU e pressão de memória durante períodos de volatilidade.
  • Percentis de latência de ponta a ponta, duração de livros desatualizados e tempo para reconstrução após uma lacuna.
  • Custo mensal por milhão de eventos aceitos, com licenciamento e infraestrutura apresentados separadamente.

Essas divisões ajudam a identificar a camada mais cara. O aumento do custo por evento aceito pode decorrer de uma tarifa mais alta da bolsa, do crescimento do número de usuários, de assinaturas excedentes ou de um handler que descarta muitas informações de entrada depois que a empresa já pagou para recebê-las. Não otimize apenas para reduzir a contagem de eventos: descartar uma atualização pode diminuir o processamento sem alterar as tarifas e prejudicar um preço, uma verificação de risco ou uma trilha de auditoria.

Inclua licenciamento e operações no controle de mudanças

Os direitos de uso dos dados devem fazer parte do mesmo processo de mudanças que a configuração do feed. Um novo universo de símbolos, uma exibição para clientes, um campo derivado ou um serviço de analytics pode alterar a situação da licença, mesmo que o desenho da rede permaneça igual. Mantenha um registro que relacione bolsa, produto, tipo de dado, aplicação consumidora, status de exibição, população de usuários e política de retenção. Revise-o quando as equipes implantarem um novo consumidor ou alterarem a finalidade de um já existente.

Do ponto de vista operacional, mantenha a captura bruta e a saída normalizada identificáveis separadamente. Isso permite reproduzir uma sessão, verificar a reconstrução do livro e rastrear se um preço incorreto veio do fluxo da bolsa, da lógica de recuperação ou de uma transformação posterior. Configure alertas para lacunas de sequência, timestamps desatualizados e crescimento persistente das filas. Teste o caminho do alerta e o processo de recuperação fora do horário de mercado e repita os testes após mudanças no handler ou na rede.

Para uma visão mais ampla dos sistemas relacionados aos feeds, a cobertura de infraestrutura da Trading Technology acompanha as plataformas, os softwares e os provedores usados por brokers e prop firms. Em compras, peça aos fornecedores que separem as cobranças recorrentes de acesso, uso, conectividade e suporte. Em engenharia, apresente as mesmas categorias de custo ao lado das métricas de latência e integridade, para que um projeto mais barato não esconda um serviço inferior.

A bolsa continua cobrando pelo feed, quer a estratégia leia cada tick ou não.

Perguntas frequentes

Como calcular o custo por tick?

Some os custos mensais de direitos de uso dos dados, conectividade, processamento, armazenamento e operações. Depois, divida o total pelos eventos aceitos entregues aos consumidores. Mantenha a definição de evento consistente e informe o custo por milhão de eventos para facilitar a comparação.

Qual é a diferença entre uma mensagem de market data e um tick?

Uma mensagem é um item recebido de um feed, enquanto um tick é uma atualização de mercado conforme a definição do sistema que a contabiliza. Um pacote pode carregar várias mensagens, e um tick normalizado pode combinar ou omitir mensagens de entrada.

Feeds diretos de market data são sempre mais rápidos que feeds consolidados?

Feeds diretos podem oferecer um trajeto mais curto e específico da bolsa, mas o desempenho depende da localização da rede, do desenho do handler e do comportamento de recuperação. Meça a latência e a integridade sob carga máxima antes de escolher um feed com base apenas em sua classificação.

O que são tarifas de market data para uso não destinado à exibição?

São cobranças ou condições de licença para usar market data em aplicações, em vez de apresentá-lo a um usuário. Algoritmos, sistemas de risco e ferramentas internas de analytics podem estar sujeitos a regras de uso não destinado à exibição, dependendo do contrato com a bolsa.

Como um broker pode reduzir os custos de feeds de market data?

Revise as assinaturas, as licenças de usuários, o uso pelas aplicações e a retenção, considerando as necessidades atuais do negócio e os termos das licenças. Filtragem e consolidação podem reduzir custos de processamento ou transporte, mas não reduzem automaticamente as tarifas das bolsas.