Defina el objetivo de carga a partir del modelo de lanzamiento
La previsión para el día del lanzamiento no es el objetivo de la prueba. Es el punto de partida. Una plataforma que soporta el promedio previsto puede fallar cuando los clientes inician sesión al mismo tiempo, las noticias impulsan la actividad de órdenes o un feed de precios se reconecta y envía una ráfaga de actualizaciones. Pruebe con un pico verosímil y, después, compruebe qué sucede cuando se supera ese pico.
Elabore la previsión a partir del producto y su plan de distribución. Calcule las cuentas con fondos, las sesiones simultáneas, los traders activos y las órdenes por trader activo por minuto. Son medidas distintas. El número de sesiones dice poco sobre el flujo de órdenes si la mayoría de los usuarios solo observa los precios, mientras que un grupo relativamente pequeño de clientes muy activos puede dominar el tráfico de la pasarela.
Utilice datos operativos cuando existan: productos actuales, entornos de demostración, previsiones de campañas y el periodo de trading comparable de mayor actividad. Distinga la actividad normal de las ráfagas breves.
Una campaña de lanzamiento puede provocar una oleada de inicios de sesión al abrir el mercado; un nuevo instrumento puede concentrar las órdenes en un conjunto reducido de símbolos. Incluya ambos casos en el modelo y registre las hipótesis para poder modificarlas si cambian los planes de marketing o la composición de los clientes.
Defina también qué significa que algo «funcione» antes de ejecutar una prueba. Establezca objetivos de nivel de servicio para la aceptación de órdenes, los controles de riesgo, las actualizaciones de precios y las vistas de cuenta.
Mida la latencia en puntos concretos, como el tiempo entre la recepción en la pasarela y la confirmación de la orden, en lugar de utilizar una única cifra vaga de extremo a extremo. El centro de ejecución externo, la red del cliente y el dispositivo añaden demoras que la plataforma no puede controlar por completo.
Construya una carga de trabajo que siga el recorrido de la orden
Una prueba útil procesa transacciones a través de los mismos componentes que el entorno de producción: autenticación, gestión de sesiones, pasarela API o FIX, riesgo pre-trade, gestión de órdenes, enrutamiento, gestión de ejecuciones, posiciones e informes. Si la prueba se detiene en la pasarela, no detectará un servicio de riesgo lento ni una cola de base de datos que se llena al cabo de varios minutos.
Reproduzca la combinación de acciones, no solo una elevada tasa de envío de órdenes idénticas. Incluya órdenes de mercado y limitadas, modificaciones, cancelaciones, rechazos, ejecuciones parciales y actualizaciones de posiciones. Combine símbolos con distintas tasas de variación de precios y tipos de cuenta con límites realistas. En una prop firm, represente los controles de evaluación, riesgo y reglas de cuenta que se aplican a cada orden. En un broker, incluya las rutas de enrutamiento pertinentes y la gestión de los informes de ejecución.
Utilice un simulador de centro de ejecución o un entorno de pruebas controlado para la ejecución externa. No dirija una prueba de estrés a un proveedor de liquidez, una bolsa o una fuente de datos de mercado en producción sin un acuerdo explícito. Simule tiempos de respuesta, rechazos y ejecuciones parciales realistas. De lo contrario, una simulación irrealmente rápida puede ocultar la contrapresión, mientras que un servicio externo sin control puede generar resultados de prueba ruidosos o riesgos operativos.
Las cifras siguientes son rangos habituales de planificación, no estándares universales. Elija valores en función de la previsión, la arquitectura y los requisitos de publicación, y documente por qué son adecuados.
| Dimensión de la prueba | Rango habitual de planificación | Qué verificar |
|---|---|---|
| Carga sostenida | De 1.2 a 1.5 veces el pico previsto durante 60 a 120 minutos | Las colas, el uso de recursos y la latencia se mantienen estables tras el calentamiento |
| Ráfaga breve de órdenes | De 1.5 a 2 veces el pico previsto durante 1 a 5 minutos | Límites de tasa, comportamiento de la pasarela y recuperación tras la ráfaga |
| Aumento gradual | De 10 a 30 minutos para alcanzar la carga objetivo | Si el crecimiento gradual revela un cuello de botella antes de la saturación |
| Prueba prolongada | De 4 a 8 horas, con pruebas más largas para procesos nocturnos | Crecimiento de memoria, fugas de conexiones, volumen de registros y tareas programadas |
| Comprobación de recuperación | Volver a la carga normal en un plazo de 5 a 15 minutos tras un fallo | Vaciado de la cola acumulada, gestión de duplicados y estado de los servicios |
Genere usuarios, órdenes e identificadores de solicitud únicos a una tasa que no convierta al propio generador de carga en el cuello de botella. Ejecute los generadores lo bastante cerca para minimizar el ruido de red, pero supervise su CPU, memoria, número de conexiones y tasa de salida.
Una prueba útil registra tanto la carga ofrecida como el trabajo completado. Si el generador envía 10,000 solicitudes, pero la plataforma solo procesa 8,000, informar de la tasa enviada como capacidad resulta engañoso.
Para más información sobre los componentes de las plataformas y los modelos operativos, la cobertura de infraestructura de Trading Technology puede ayudar a definir qué debe incluirse en el ámbito de la prueba.
Ejecute pruebas que revelen cuellos de botella y modos de fallo
Utilice una secuencia de pruebas controladas. Siempre que sea posible, cambie una variable principal cada vez. Empiece por debajo del pico previsto para validar el entorno de pruebas y la telemetría; después, aumente la simultaneidad y la tasa de órdenes por etapas. Un salto repentino a un objetivo elevado puede mostrar que algo ha fallado, pero aporta pocos datos sobre el momento en que el rendimiento empezó a deteriorarse.
- Valide el recorrido con poca carga. Confirme que las cuentas de prueba, los símbolos, la configuración de riesgo y la simulación de ejecución se comportan como se espera. Compare los recuentos del generador, la pasarela, el sistema de órdenes y los servicios posteriores para detectar eventos perdidos o duplicados.
- Establezca una referencia. Registre los percentiles de latencia, las tasas de error y rechazo, la profundidad de las colas, la CPU, la memoria, las conexiones a la base de datos y el rendimiento de la red con una carga moderada. Capture métricas por servicio, no solo promedios del host. Los promedios pueden ocultar una partición saturada o una única instancia sobrecargada.
- Aumente la carga hasta el objetivo sostenido. Incremente la carga en etapas definidas, por ejemplo, en intervalos del 25 por ciento, y mantenga cada etapa el tiempo suficiente para observar las colas y los percentiles. Supervise la latencia p95 y p99 junto con el rendimiento. Un aumento de p99 con un promedio estable suele ser una señal temprana de que una pequeña proporción de solicitudes espera detrás de una dependencia saturada.
- Aplique una ráfaga y una prueba prolongada. Genere la ráfaga breve acordada y, después, mantenga el tráfico sostenido durante varias horas. Compruebe si las colas se vacían tras la ráfaga y si la memoria, los descriptores de archivo, los pools de conexiones o el uso del almacenamiento siguen aumentando durante la prueba prolongada.
- Retire una dependencia cada vez. Pruebe una respuesta de ejecución demorada, una reconexión de datos de mercado, una base de datos lenta o la pérdida de un nodo. Mantenga los fallos bajo control y acuerde la prueba con operaciones. Verifique que los tiempos de espera y los circuit breakers impidan que una dependencia fallida ocupe todos los hilos de trabajo.
- Pruebe la recuperación y la reproducción. Restablezca el servicio y compruebe el procesamiento de la cola acumulada, la conciliación del estado de las órdenes y la protección contra duplicados. Confirme que la recuperación no genere una segunda ráfaga que supere el pico original. Mida el tiempo hasta alcanzar un estado estable, no solo el tiempo hasta que una comprobación de estado indique que todo está bien.
- Repita la prueba tras la corrección. Mantenga la misma carga de trabajo y los mismos datos de prueba para que la comparación antes y después sea significativa. A continuación, ejecute una prueba de regresión frente a la referencia anterior, porque una optimización local puede trasladar la carga a otro servicio.
Correlacione las trazas de la aplicación con las métricas de infraestructura y las marcas de tiempo de los eventos. Para cada orden lenta, averigüe dónde se acumuló el tiempo: en la cola de la pasarela, la evaluación de riesgo, una llamada a la base de datos, el enrutamiento o la respuesta de ejecución.
Conserve los resultados sin procesar y la configuración junto con el identificador de compilación. Un gráfico sin la versión de la prueba, el conjunto de datos y el perfil de carga es difícil de utilizar para decidir si se publica.
Preste atención a la contención que las pruebas sintéticas suelen pasar por alto. Las bases de datos compartidas, las cachés y los brokers de mensajes pueden estar ocupados con tareas administrativas, informes o trabajos nocturnos. Si producción utiliza pools o particiones separados, reprodúzcalos con precisión. Si no es así, incluya esas cargas de trabajo concurrentes y decida si el lanzamiento requiere una ventana de mantenimiento.
Convierta los resultados en una decisión de publicación
La capacidad no es una sola cifra. Registre la carga máxima con la que el sistema cumple sus objetivos de latencia y error, e identifique el primer componente que se acerca a su límite. Tener margen de CPU no sirve si se agota un pool de conexiones, y una confirmación rápida de la orden no demuestra que las ejecuciones y los saldos de cuenta se estén actualizando correctamente.
Acuerde las condiciones para la publicación con los equipos de ingeniería y operaciones antes de la prueba final. Un conjunto práctico incluye:
- Todos los recorridos críticos de órdenes se completan con recuentos conciliados y sin diferencias de estado sin explicación.
- Los percentiles de latencia y las tasas de error se mantienen dentro de los objetivos definidos para el producto's con la carga sostenida objetivo y durante la ráfaga acordada.
- Las colas vuelven a su rango normal tras las ráfagas y los fallos, sin que se acumule un retraso creciente durante la prueba prolongada.
- La gestión de fallos, las alertas, los límites de tasa y los procedimientos de reversión funcionan en un ejercicio controlado.
- La capacidad cuenta con un margen definido por encima del pico previsto, y se registran las hipótesis y las medidas de escalado.
Los objetivos de margen habituales varían. Un equipo podría planificar entre un 20 y un 50 por ciento por encima de un pico previsto verosímil, pero el margen adecuado depende de la rapidez con que pueda ampliarse la capacidad, de la incertidumbre sobre la adopción y de si el cuello de botella es compartido.
Un servicio en la nube que pueda escalar de forma predecible quizá necesite una reserva distinta a la de una capa de emparejamiento o riesgo con capacidad fija. No considere el autoescalado una prueba de capacidad: verifique el retraso de activación, el tiempo de calentamiento, las cuotas y el comportamiento ante una ráfaga.
Condicione la decisión de publicación a la preparación operativa, además del rendimiento. Designe a quién supervisará el lanzamiento, qué paneles y alertas utilizará, cuándo pausará el equipo las nuevas incorporaciones y quién podrá desactivar un producto o una ruta. Defina umbrales de reversión con criterios medibles, como rechazos de órdenes por encima de una tasa acordada durante un periodo determinado o una latencia p99 fuera del objetivo durante un periodo definido. Una intervención ensayada es más segura que confiar informalmente en que alguien se dará cuenta.
Si esta fuera mi operación, primero elaboraría un modelo de carga a partir de la previsión de lanzamiento y del periodo de producción comparable con más actividad; después, validaría cada etapa con transacciones de bajo volumen. No aprobaría el lanzamiento hasta que una prueba sostenida, una ráfaga y una prueba de recuperación superaran las condiciones acordadas en la compilación de publicación.
Preguntas frecuentes
¿Qué carga debería soportar una plataforma de trading antes del lanzamiento?
Utilice la previsión de lanzamiento como referencia y pruebe por encima de ella. Los rangos habituales de planificación son de 1.2 a 1.5 veces el pico previsto para la carga sostenida y de 1.5 a 2 veces el pico para una ráfaga breve, con ajustes según la incertidumbre y la capacidad de escalado disponible.
¿Cuánto tiempo debería durar una prueba de carga de una plataforma de trading?
Una prueba sostenida de 60 a 120 minutos puede revelar problemas de colas y latencia, mientras que una prueba prolongada de 4 a 8 horas puede detectar fugas y crecimiento del uso de recursos. Amplíe la prueba si la plataforma tiene procesos nocturnos o cargas de trabajo programadas que afecten a producción.
¿Qué debe incluir una prueba de carga de una plataforma de broker?
Pruebe la autenticación, las pasarelas, el riesgo pre-trade, la gestión de órdenes, el enrutamiento, los informes de ejecución, las posiciones y los informes. Incluya una combinación realista de tipos de órdenes, cancelaciones, modificaciones, rechazos, ejecuciones parciales y actividad de datos de mercado.
¿Se pueden realizar pruebas de carga con un proveedor de liquidez en producción?
Solo con un acuerdo explícito y controles adecuados. Por lo general, un simulador de centro de ejecución es más seguro para las pruebas de estrés y de fallos, siempre que reproduzca tiempos de respuesta, rechazos y ejecuciones parciales realistas.
Plataformas · Software · Proveedores · Mercados