Pruebas de carga de una plataforma de trading antes del lanzamiento

Ingeniero supervisa el rendimiento del servidor durante pruebas de carga de una plataforma de trading
Photo by panumas nikhomkhai on Pexels

Empiece por el coste de un lanzamiento fallido

10 personas ocupadas durante cuatro horas tras una prueba de lanzamiento fallida suponen £3,000-£6,000 con las tarifas internas habituales totalmente cargadas, de £75-£150 por hora, sin contar las operaciones perdidas ni las medidas correctivas para los clientes. El grupo puede incluir personal de ingeniería, dealing, operaciones y soporte. Un plan de pruebas no es gratis, pero una prueba pequeña y controlada suele ser más barata que descubrir un cuello de botella mientras los clientes cursan órdenes.

Para un broker o una prop firm, el objetivo no es una cifra llamativa de usuarios virtuales. Se trata de demostrar que todo el flujo de trading puede soportar la carga prevista para el lanzamiento dentro de los tiempos de respuesta acordados y sin perder, duplicar ni desordenar el estado. Ese flujo puede incluir autenticación, comprobaciones de cuentas y margen, distribución de precios, enrutamiento de órdenes, informes de ejecución, actualizaciones de posiciones y almacenamiento de auditoría.

Empiece por acordar qué va a cambiar: un nuevo instrumento, un grupo numeroso de clientes, una promoción, una migración de plataforma o una nueva ruta de liquidez. Cada cambio genera un perfil de demanda distinto.

Una campaña de incorporación desde móviles puede someter a presión la autenticación y la creación de cuentas; un nuevo producto con precios volátiles puede exigir más a la distribución de datos de mercado, los controles de riesgo y el tráfico de modificación de órdenes. Defina qué decisión debe respaldar la prueba antes de elegir una herramienta.

Compare los enfoques disponibles

Hay cuatro opciones habituales. Los equipos pueden desarrollar y operar su propio generador de carga, contratar un servicio de pruebas, recurrir a un proveedor especializado o reproducir tráfico similar al de producción en un entorno seguro.

Estas opciones se pueden combinar. Los rangos de costes que se indican a continuación son estimaciones habituales del mercado, no cifras auditadas de un proveedor concreto. No incluyen las licencias de plataforma existentes y varían según la región, la escala y la duración de la prueba.

EnfoqueRango de costes habitualÚtil paraPrincipal contrapartida
Scripts y generadores internos£5,000-£25,000 de desarrollo inicial, más £200-£3,000 por prueba sustancialPruebas de regresión recurrentes y protocolos personalizadosRequiere que los ingenieros mantengan escenarios, datos y generadores realistas
Servicio cloud de pruebas de carga£500-£5,000 al mes, más aproximadamente £200-£5,000 para la infraestructura de pruebasGeneración rápida de tráfico HTTP, WebSocket o API distribuidoEs necesario comprobar los límites de protocolo, los cargos por transferencia de datos y las restricciones de los servicios compartidos
Campaña gestionada especializada£5,000-£30,000 por campañaUna fecha límite de lanzamiento fija o conocimientos especializados de FIX y tradingEl alcance y el acceso deben acordarse con antelación; la empresa sigue siendo responsable de la preparación para producción
Reproducción de tráfico similar al de producción o tráfico en sombra£1,000-£10,000 en infraestructura de pruebas incremental, más ingenieríaValidación de formatos de mensajes y combinaciones de eventos reales en un entorno controladoRequiere datos anonimizados y medidas que impidan el envío de órdenes reales

Las herramientas internas suelen tener sentido en plataformas con protocolos estables y lanzamientos recurrentes. Un servicio cloud puede reducir el tiempo de configuración, pero un servicio orientado al navegador quizá no pueda generar sesiones FIX ni reproducir correctamente flujos de órdenes con estado.

Las pruebas gestionadas aportan experiencia en el diseño de pruebas y la generación de tráfico, pero no eliminan la necesidad de que la empresa defina sus propios controles de riesgo y criterios de aceptación. En la cobertura de infraestructura de brokers puede consultarse una descripción general útil de los sistemas que deben abarcar estas pruebas.

Modele el recorrido de trading, no solo la concurrencia

Las sesiones simultáneas son una medida útil de capacidad, pero dicen poco sobre la carga del flujo de órdenes. Mil usuarios que consultan precios y cursan una orden cada uno generan una carga distinta de la de un grupo más pequeño que envía solicitudes frecuentes de cancelación y sustitución. Especifique las tasas por acción y tipo de mensaje. Incluya periodos de inactividad, picos y reconexiones realistas.

Elabore una combinación de carga a partir de las hipótesis sobre el producto o de telemetría de producción anonimizada. Un escenario representativo podría incluir:

  • Inicios de sesión, renovaciones de tokens y consultas de cuentas o instrumentos durante el aumento inicial.
  • Cambios de suscripción y actualizaciones de datos de mercado, incluida su distribución a varias sesiones.
  • Nuevas órdenes, rechazos, cancelaciones y modificaciones, con la combinación prevista de tipos de órdenes.
  • Controles de riesgo y margen, informes de ejecución, actualizaciones de posiciones y refresco de saldos.
  • Desconexiones, reintentos y reconexiones tras una interrupción de red o el reinicio de una pasarela.

Exprese las tasas de forma explícita. Por ejemplo, defina 2,000 sesiones activas, 300 nuevas órdenes por segundo y 500 modificaciones por segundo como perfil de prueba solo si esas cifras reflejan el grupo previsto. No son medidas intercambiables y no deben presentarse como un referente general para brokers. Registre la distribución entre cuentas, instrumentos y símbolos: un instrumento con muchas suscripciones puede crear una partición sobrecargada aunque el tráfico total parezca moderado.

Siempre que sea posible, utilice identificadores y secuencias de datos de mercado similares a los de producción, pero elimine los datos personales y las credenciales. Asegúrese de que el generador mantenga el estado.

Debe saber si una orden está abierta, rechazada, ejecutada parcialmente o cancelada, y enviar solo las siguientes acciones válidas. De lo contrario, la prueba puede consumir su capacidad generando solicitudes no válidas que una pasarela rechace antes de que lleguen a los servicios que deben probarse.

Adapte cada prueba a un modo de fallo

Una prueba de carga de referencia comprueba el tráfico previsto para el lanzamiento durante un periodo estable. Una prueba de incremento eleva la demanda en etapas medidas y muestra en qué punto empiezan a aumentar la latencia o los errores. Una prueba de pico comprueba un aumento repentino, como el inicio de sesión simultáneo de un grupo numeroso.

Una prueba de resistencia se ejecuta durante horas para detectar el crecimiento del uso de memoria, la acumulación en colas, las fugas de conexiones y las tareas programadas. Una prueba de estrés supera la demanda prevista para encontrar un límite y observar cómo falla la plataforma.

No considere que un único resultado de rendimiento máximo demuestra que la plataforma está preparada. Registre las distribuciones de latencia en cada etapa, en especial p95 y p99, junto con la tasa de errores, el tiempo de confirmación de órdenes, la profundidad de las colas, la CPU, la memoria, las conexiones a la base de datos y el rendimiento de red.

Supervise tanto la respuesta visible para el cliente como las etapas internas. Una respuesta rápida de la API puede ocultar un informe de ejecución posterior retrasado; un promedio saludable puede ocultar un p99 que incumple el objetivo de servicio del producto.

Establezca los criterios de aprobación antes de la ejecución. Deben especificar los tiempos de respuesta aceptables para cada recorrido de usuario, las tasas máximas de error y rechazo, el comportamiento de las colas y si la plataforma se recupera cuando disminuye la demanda.

Utilice los objetivos de servicio existentes cuando corresponda. Si no existen, acuerde los límites con dealing y operaciones en función del producto y la ruta de ejecución, en lugar de elegir un objetivo de latencia arbitrario después de ver los resultados.

Ejecute las pruebas en una topología similar a la de producción: réplicas de aplicaciones, configuración de bases de datos, configuración del broker de mensajes, ruta de red y reglas de escalado automático similares. Un entorno de pruebas con la mitad de la capacidad de la base de datos no es un sustituto válido, a menos que se conozcan sus límites.

Confirme que cualquier venue externo, proveedor de liquidez o integración de pagos esté simulado o cuente con autorización expresa. Mantenga las cuentas e instrumentos de prueba separados del trading en vivo.

Realice una prueba controlada y siga una lista de comprobación para el lanzamiento

Antes de aumentar la carga, demuestre que la propia prueba no es el cuello de botella. Los generadores de carga necesitan margen, relojes estables y suficiente capacidad de red.

Realice una calibración de pequeña escala y compare la CPU del generador, el número de conexiones y el ancho de banda saliente con las mediciones de la aplicación. Si un generador se satura al 70 per cent de CPU, una curva de rendimiento plana puede deberse al equipo de pruebas y no a la plataforma.

Coordine la prueba con operaciones, dealing y los proveedores pertinentes. Designe a un responsable, establezca una condición de parada y habilite un canal para tomar decisiones ante incidentes. Desactive el enrutamiento de órdenes reales salvo que la prueba esté formalmente autorizada. Utilice cuentas sintéticas, saldos de prueba limitados y datos deterministas siempre que sea posible. Asegúrese de que los registros y las métricas mantengan identificadores de correlación en la pasarela, el servicio de riesgo, la gestión de órdenes y los servicios de ejecución, para poder rastrear una confirmación lenta en lugar de hacer conjeturas.

  1. Documente el grupo de lanzamiento, el número máximo de sesiones, las tasas de órdenes, el perfil de datos de mercado y el incremento previsto.
  2. Elija los recorridos de usuario y la combinación de mensajes específicos; incluya rechazos, modificaciones y reconexiones.
  3. Confirme la capacidad del entorno de pruebas, la anonimización de datos, las medidas de protección del enrutamiento y las aprobaciones de proveedores.
  4. Realice una calibración a baja tasa y, después, una prueba de referencia antes de probar el pico previsto y una sobrecarga medida.
  5. Registre la latencia p50, p95 y p99, los errores, la profundidad de las colas, el uso de recursos y la finalización de procesos posteriores.
  6. Repita la prueba de pico tras aplicar las correcciones y compruebe la recuperación, el escalado automático y el comportamiento tras un reinicio.
  7. Publique las pruebas, los riesgos abiertos, el responsable y la decisión de lanzamiento en un registro que pueda utilizar operaciones.

Integre la puerta de lanzamiento en las operaciones

Una prueba aprobada es un elemento para decidir el lanzamiento, no una garantía de que el tráfico en vivo coincida con el modelo. Documente qué hipótesis se probaron, qué dependencias se simularon y qué margen queda. Establezca una fase de lanzamiento progresivo que operaciones pueda observar y controlar. Entre los controles útiles se incluyen límites por grupo, restricciones por instrumento, una ruta de reversión probada y paneles para las confirmaciones de órdenes, los rechazos, la latencia del servicio de riesgo y el crecimiento de las colas.

Defina quién puede pausar el despliegue progresivo y qué señal activa esa decisión. Una cola que crece de manera sostenida o una brecha cada vez mayor entre la aceptación de órdenes y las actualizaciones posteriores del estado pueden ser señales de alerta más importantes que un pico breve de CPU.

Compruebe quién es responsable de las alertas y la cobertura de guardia antes del lanzamiento. El procedimiento operativo debe indicar cómo reducir las nuevas sesiones o las tasas de órdenes sin dejar órdenes abiertas, posiciones obsoletas o estados incoherentes de cara al cliente.

Tras el lanzamiento, compare las tasas reales de sesiones y mensajes con el perfil de prueba. Registre los errores del modelo y utilice esa información en el siguiente lanzamiento.

Siempre que sea viable, la supervisión de producción debe utilizar los mismos objetivos de servicio que la prueba, manteniendo las medidas de protección para el trading en vivo. Deje de hacer lo siguiente antes del próximo lanzamiento:

  • Deje de informar solo del número de usuarios virtuales o de las solicitudes por segundo en el pico.
  • Deje de probar con una única orden de recorrido sin incidencias y considerarla una carga de trading.
  • Deje de realizar pruebas de carga no coordinadas contra venues en vivo o datos de producción compartidos.
  • Deje de aprobar lanzamientos sin umbrales, responsables y una vía de pausa probada y designados.

Preguntas frecuentes

¿Con cuánta antelación al lanzamiento debe realizar un broker una prueba de carga?

Programe la primera prueba realista varias semanas antes del lanzamiento para disponer de tiempo para corregir cuellos de botella y repetirla. Una campaña especializada puede requerir entre una y tres semanas de preparación, sobre todo si se necesitan aprobaciones de acceso, datos o proveedores.

¿Qué debe medir una prueba de carga de una plataforma de trading?

Mida la latencia y los errores visibles para el cliente en los procesos de inicio de sesión, datos de mercado, envío de órdenes y actualizaciones posteriores de ejecución. Supervise también la latencia p95 y p99, la profundidad de las colas, el uso de recursos, los rechazos y la recuperación tras un pico o el reinicio de un servicio.

¿Puede un broker utilizar tráfico de producción para las pruebas de carga?

El tráfico anonimizado y similar al de producción puede mejorar el realismo, pero reprodúzcalo en un entorno aislado o utilice tráfico en sombra cuidadosamente controlado. Evite que las órdenes de prueba lleguen a venues en vivo y elimine los datos personales, las credenciales y otros campos sensibles.

¿Basta un servicio cloud de pruebas de carga para plataformas FIX?

No necesariamente. Confirme que el servicio puede mantener sesiones FIX con estado y generar secuencias de órdenes válidas, en lugar de limitarse a solicitudes HTTP. Los equipos pueden necesitar un generador personalizado o un proveedor especializado para escenarios específicos del protocolo.

¿Cuánto cuesta probar la carga de una plataforma de trading?

Los rangos habituales del mercado van desde unos cientos de libras para la infraestructura de pruebas hasta £5,000-£30,000 para una campaña especializada. El tiempo de ingeniería interno, el acceso a la plataforma, la preparación de datos y las pruebas repetidas pueden aumentar considerablemente el coste total.