Quanto custa um tick de dados de mercado? Mais do que a cobrança do fornecedor dividida pela quantidade de mensagens.
Uma medida útil inclui licenciamento, transporte, processamento e entrega, divididos pelas atualizações que chegam aos consumidores capazes de agir com base nelas. Faça a medição durante uma sessão movimentada nesta semana, antes de mudar a capacidade do feed ou a cobertura do fornecedor.
A contagem bruta de ticks é um denominador ruim. Uma duplicata, uma mensagem de recuperação e uma atualização de um símbolo não utilizado consomem recursos, mas não geram o mesmo valor operacional. Comece definindo a unidade: por exemplo, uma atualização válida, sequenciada, de um instrumento autorizado, normalizada e disponível para uma estratégia específica ou um serviço voltado ao cliente.
Defina o tick antes de precificá-lo
Equipes diferentes usam "tick" para se referir a uma negociação, uma alteração de cotação, uma atualização de nível do livro ou um pacote. Registre qual desses conceitos aparece em cada painel e na conciliação das faturas.
Um pacote pode conter várias atualizações; uma atualização do livro pode alterar vários níveis de preço. Tratar esses itens como equivalentes torna pouco confiáveis as comparações entre feeds e bolsas.
Para fazer a medição, separe três contagens:
- Recebidas: mensagens ou pacotes observados na interface de rede, incluindo duplicatas e tráfego de recuperação.
- Aceitas: atualizações válidas e sequenciadas após decodificação, verificação de lacunas e normalização.
- Úteis: atualizações aceitas encaminhadas a um consumidor autorizado a usá-las, após qualquer filtragem ou consolidação intencional.
Registre cada contagem por bolsa, canal, grupo de instrumentos e consumidor. Mantenha o tráfego de snapshots separado das atualizações incrementais. Snapshots estabelecem o estado ou corrigem uma lacuna; não devem ser contabilizados como mudanças normais do mercado. Da mesma forma, conte as retransmissões à parte. Um feed com baixa taxa média de mensagens ainda pode gerar um volume expressivo de recuperação após a perda de pacotes.
Calcule pelo menos dois custos unitários. O custo operacional total por atualização útil corresponde aos custos recorrentes alocados de feed, rede, computação e suporte divididos pelas atualizações úteis no período. O custo marginal é o custo adicional de infraestrutura e serviço gerado pelo processamento e distribuição de mais atualizações. O primeiro orienta decisões de contratação e orçamento. O segundo ajuda no planejamento de capacidade. Para um guia prático dos sistemas e fornecedores envolvidos, consulte a cobertura de infraestrutura da Trading Technology.
Meça o percurso, não apenas a taxa do fornecedor
Monitore o feed da interface de rede até o consumidor final. Capture os contadores de pacotes e sequências na entrada, os erros de decodificação e as solicitações de recuperação no handler; depois, registre a taxa de publicação e a latência em cada ponto de fan-out.
Use timestamps monotônicos de um relógio devidamente sincronizado. Usar apenas timestamps de relógio de parede pode fazer pequenas mudanças de latência desaparecerem em meio ao erro do relógio.
As faixas abaixo são valores típicos de mercado em ambientes de produção, não garantias de nível de serviço. Protocolo, hardware, carga da bolsa, co-location e pontos de medição podem alterar substancialmente os números. Use-os como indicações do que inspecionar, não como critérios de aceitação.
| Medição | Faixa típica de mercado | O que verificar |
|---|---|---|
| Payload de mensagem incremental | 40-200 bytes | Se o tamanho informado inclui cabeçalhos de transporte, preenchimento ou atualizações agrupadas |
| Decodificação e normalização no feed handler | 10-200 microssegundos em p99 | Limites dos timestamps, afinidade de CPU, alocação e latência de cauda durante picos |
| Publicação interna até o consumidor | 100 microssegundos-2 milissegundos em p99 | Profundidade da fila, quantidade de destinos no fan-out e se os consumidores compartilham um caminho congestionado |
| Recuperação de lacunas e replay | 100 milissegundos a vários segundos | Frequência das lacunas, volume de replay e tempo até que seja seguro para o consumidor operar |
| Taxa de atualizações no pico em relação à média | 3:1-10:1 | Capacidade diante de picos na abertura, no fechamento, em notícias e em leilões, em vez da média diária |
Não deduza a latência a partir de um único número de ponta a ponta. Um p99 de 500 microssegundos pode ser causado pela decodificação, por uma fila cheia, por um assinante lento ou pelo posicionamento do timestamp.
Preserve histogramas por etapa e correlacione picos com perda de pacotes, retransmissões, saturação de CPU e quantidade de consumidores. Acompanhe p50, p99 e p99.9; uma média pode ocultar a cauda que importa para a execução automatizada.
Meça a saída útil também como taxa, além do total. Compare as atualizações recebidas com as publicadas e registre a redução em cada filtro.
Se o handler aceita 100,000 atualizações por segundo, mas uma estratégia se inscreve em 2,000, a diferença pode ser perfeitamente legítima. Se não houver uma explicação para a diferença, verifique os mapas de símbolos, os filtros de permissões, a supressão de duplicatas e as inscrições desatualizadas.
Reúna os custos de licenciamento e entrega em uma mesma planilha
Os preços dos feeds nem sempre são simples cobranças por mensagem. Os termos das bolsas e dos fornecedores podem diferenciar uso em tela de uso não exibido, usuários profissionais de não profissionais, dados derivados, redistribuição interna, distribuição externa e quantidade de dispositivos ou usuários.
Uma estratégia que consome dados pode exigir uma permissão diferente daquela necessária para uma tela que exibe os mesmos valores. Confirme os termos com o fornecedor e a bolsa pertinentes; não presuma que o acesso técnico autoriza todos os usos.
Monte um registro mensal de custos para cada feed e caso de uso. Inclua cobranças recorrentes do fornecedor e da bolsa, conectividade, cross-connects, custos de gabinete ou nuvem, computação do handler, armazenamento, monitoramento e o tempo da equipe dedicado às operações.
Distribua os custos dos componentes compartilhados usando um método declarado, como largura de banda de pico ou tempo de CPU. Evite distribuir tudo por quantidade de símbolos se um grupo de instrumentos movimentado for responsável pela maior parte da carga.
Mantenha o trabalho de implementação pontual separado dos custos recorrentes. Inclua o esforço contínuo de gerenciamento de certificados, mudanças de símbolos, atualizações de software, auditorias de permissões, resposta a incidentes e testes de recuperação.
Esses custos podem não aparecer em uma fatura de dados, mas afetam o custo de operação de um feed. Um breve panorama das plataformas e dos fornecedores está disponível em nossa cobertura de tecnologia para trading.
Calcule três medidas: custo por atualização recebida, custo por atualização aceita e custo por atualização útil. Uma diferença grande entre a primeira e a terceira pode indicar inscrições abrangentes demais, canais duplicados ou dados não utilizados. Também pode ser o preço racional da resiliência, como um feed redundante ou um livro completo. Identifique o motivo, em vez de tratar toda redução como desperdício.
Siga este checklist durante a próxima sessão
Use uma sessão normal e um intervalo movimentado conhecido. Mantenha a janela de amostragem e o conjunto de instrumentos iguais entre os feeds. Designe um engenheiro para acompanhar os contadores e uma pessoa de operações ou finanças para cuidar do registro de custos, para que os volumes técnicos possam ser conciliados com o uso previsto em contrato.
- Antes da abertura: exporte as inscrições, os instrumentos, os canais e os mapeamentos de consumidores atuais. Marque quais consumidores precisam de profundidade completa, melhor oferta e demanda, negociações ou snapshots.
- Durante a sessão: colete bytes de entrada, taxa de pacotes, lacunas de sequência, duplicatas, volume de recuperação, atualizações aceitas e atualizações publicadas em intervalos de um minuto. Preserve a latência p99 e p99.9 por etapa de processamento.
- No intervalo de maior movimento: registre CPU por núcleo, memória, profundidade da fila, utilização da rede e quantidade de destinos no fan-out. Verifique se um assinante lento atrasa os outros consumidores ou se o handler descarta dados durante picos de carga.
- Após o fechamento: concilie os volumes do feed e os usuários com as permissões e as faturas. Separe o uso em tela, não exibido e de redistribuição quando exigido pelo contrato. Sinalize qualquer consumidor desconhecido, em vez de presumir sua situação.
- Antes de mudar a cobertura: calcule os três custos unitários e compare capacidade de pico, comportamento de recuperação e latência. Teste qualquer filtragem ou consolidação proposta com as estratégias e os controles que dependem das atualizações.
Salve os contadores brutos, a versão da configuração e as premissas de cálculo. Um custo unitário sem denominador, janela de amostragem e método de alocação é difícil de reproduzir. Compartilhe a mesma definição com engenharia, operações e finanças antes de usá-la para justificar uma mudança de fornecedor.
Transforme o resultado em uma decisão operacional
Um custo menor por atualização não significa automaticamente um feed melhor. Reduzir a profundidade, ampliar a consolidação ou eliminar um caminho redundante pode diminuir os gastos e, ao mesmo tempo, alterar o comportamento de execução ou o risco de recuperação. Compare cada opção com requisitos explícitos: uso permitido, instrumentos, volume máximo, recuperação de perdas, distribuição da latência e tempo necessário para restabelecer um livro confiável.
Comece buscando mudanças que preservem esses requisitos. Remova inscrições desatualizadas, corrija o encaminhamento duplicado, dimensione adequadamente a capacidade do handler e identifique consumidores que recebem dados sem utilizá-los. Quando os termos da licença permitirem, teste se a filtragem pode ocorrer antes de um fan-out custoso. Verifique se qualquer saída derivada ou consolidada continua dentro dos termos contratuais e se os indicadores de sequência e atualização permanecem após a transformação.
Para qualquer mudança, defina um limite para reversão antes da implantação. Exemplos incluem aumento da latência p99, prazo de recuperação não cumprido, lacuna de sequência não corrigida ou divergência entre o livro publicado e uma referência confiável.
Mantenha um replay ou captura representativo para que a equipe possa comparar o comportamento antigo e o novo, inclusive nos períodos de pico. O objetivo é obter uma medida de custo justificável que não esconda uma contrapartida em confiabilidade.
Conte as atualizações que seus consumidores podem usar e depois calcule o custo do percurso que as entrega.
Encerre a semana com um resultado de uma página: definições das unidades, período de amostragem, três contagens, alocação dos custos recorrentes, carga de pico, percentis de latência e dúvidas não resolvidas sobre permissões. Inclua o responsável e a data da próxima revisão. Isso transforma um exercício pontual em uma referência para o planejamento de capacidade e a revisão de contratos.
Antes de fechar o chamado, verifique um número por conta própria: qual porcentagem das atualizações recebidas durante a janela mais movimentada de cinco minutos chegou a um consumidor ativo e autorizado?
Perguntas frequentes
Como calcular o custo de um tick de dados de mercado?
Some os custos recorrentes alocados de licenciamento, conectividade, computação e operações e divida o total por uma quantidade claramente definida de atualizações úteis. Mantenha números separados para atualizações recebidas, aceitas e entregues aos consumidores, para que a filtragem e o tráfego de recuperação não distorçam o resultado.
O que conta como um tick de dados de mercado?
Depende do feed e da medição: pode significar uma negociação, uma alteração de cotação, uma atualização de nível do livro ou um pacote. Defina a unidade explicitamente e não compare contagens baseadas em definições diferentes.
Quais métricas de feeds de dados de mercado um broker deve monitorar?
Monitore a taxa de entrada, lacunas de sequência, duplicatas, volume de recuperação, erros de decodificação, taxa de publicação para consumidores e percentis de latência. Acompanhe também a profundidade da fila, a CPU e a perda de pacotes para identificar onde ocorrem atrasos ou descartes.
Com que frequência uma empresa de trading deve revisar as permissões de dados de mercado?
Revise-as ao adicionar um feed, mudar um consumidor ou ampliar o uso para exibição, uso não exibido ou redistribuição. Uma conciliação periódica com usuários e serviços ativos também pode revelar inscrições desatualizadas e usos não reconhecidos.
Por que a latência média do feed não é suficiente?
Uma média pode ocultar atrasos breves, mas relevantes, durante picos ou recuperações. Compare p50, p99 e p99.9 por etapa de processamento e correlacione mudanças na cauda com perda de pacotes, profundidade da fila e comportamento dos consumidores.
Plataformas · Software · Provedores · Mercados