Para garantizar la estabilidad del sistema en línea antes de los principales días festivos y eventos, Didi necesita realizar múltiples rondas de investigación de riesgos y aceptación de capacidad a través de pruebas de estrés de enlace completo. A menudo escuchamos voces como: "Sus pruebas de estrés de enlace completo y en línea escenarios de negocios ¿Qué tan grande es la diferencia?", "¿Es cierto que la prueba de presión alcanza la línea objetivo y puede soportar una cantidad tan grande?", "Cierto módulo mío siente que la presión es mucho mayor que la línea durante la prueba. prueba de presión", etc. Carecemos de un conjunto de medios para ver la diferencia entre la cobertura de la prueba de estrés y el tráfico del sistema real, y la verificación subjetiva tiene grandes errores e irracionalidad. Por lo tanto, construimos un sistema de medición de simulación de prueba de presión para evaluar científicamente la cobertura de la prueba de presión y el sistema real. diferencias.
A partir de 2020, el equipo de pruebas de estrés de transporte de automóviles en línea comenzó a centrarse en la construcción de un sistema de medición de simulación de pruebas de estrés y una aplicación de ingeniería realizada. Este artículo presentará sistemáticamente el proceso de construcción de la medición de simulación de prueba de estrés de enlace completo de transporte de automóviles en línea de Didi. sistema.
fondo
A medida que los escenarios comerciales en línea del negocio de transporte de automóviles en línea de Didi se vuelven cada vez más complejos, así como las características de marea del negocio de transporte de automóviles en línea y el aumento repentino del tráfico durante las vacaciones, los desafíos de garantía de estabilidad son enormes. Las pruebas de estrés son para lidiar con el complejo entorno distribuido actual. Las muchas incertidumbres que enfrentan pueden conducir al método central de problemas de disponibilidad del sistema. Las pruebas de estrés de enlace completo son para simular las solicitudes y datos reales de una gran cantidad de usuarios a través de medios técnicos, probar y verificar todo el vínculo comercial en varios escenarios y descubrir continuamente sistemas en línea. Riesgos potenciales para la estabilidad, ayudando a verificar si el sistema puede soportar la estimación de flujo de las principales actividades y eventos que se han formulado, y ayudando a las partes del servicio a llevar a cabo una investigación de riesgos. y resolución. La siguiente figura muestra el diagrama de construcción de la prueba de estrés de enlace completo del servicio de transporte de vehículos en línea:
Para las pruebas de estrés de enlace completo de llamadas de automóviles en línea, el mayor desafío es que existen muchas incertidumbres al simular escenarios reales:
Incertidumbre en el tiempo y el espacio. Los pasajeros deben recibir pedidos dentro de un tiempo fijo después de emitirlos. Las condiciones de coincidencia entre conductores y pasajeros dependen de la distancia entre conductores y pasajeros.
Debido a la incertidumbre de la distancia del pedido y la hora de recogida del conductor, la prueba de estrés para recoger y dejar al conductor no puede simular completamente en línea la escena real de la carretera, como atascos de tráfico, etc. y la velocidad de descenso del conductor de la prueba de esfuerzo es demasiado rápida, la capacidad de transporte será demasiado suficiente, y si es demasiado lenta, la capacidad de transporte será insuficiente, lo que resultará en una desviación entre la prueba de presión y la escena real en línea;
Incertidumbre en la finalización del pedido, los conductores reciben pedidos dependen completamente de la estrategia de coincidencia de pedidos, el mismo conductor en el mismo lugar puede recibir pedidos diferentes;
También existen cosas como escenarios inciertos, categorías inciertas y apropiación de recursos de módulos públicos por parte del tráfico de otras líneas comerciales.
Con la bendición de tantos factores inciertos, debemos asegurarnos de que la prueba de estrés de enlace completo sea lo suficientemente simulada para lograr el objetivo de "tanta presión posible". El sistema de medición de simulación es una forma clave de medir la credibilidad de la prueba de estrés de enlace completo y tiene dos significados: uno es ver claramente la situación actual de la cobertura de la prueba de estrés de enlace completo, para que los estudiantes relacionados con la estabilidad puedan comprender sus sistemas, servicios y cadenas correspondientes. La prueba de esfuerzo en carretera cubre la situación real, mejorando la confianza de todos en la prueba de esfuerzo de enlace completo. El segundo es descubrir los puntos débiles de la cobertura de las pruebas de estrés, guiar a los estudiantes de mantenimiento de las pruebas de estrés para que mejoren de manera direccional, formar un circuito cerrado positivo y garantizar el efecto de la prueba de estrés.
El proceso de construcción de un sistema de medición de simulación por parte de Didi tiene principalmente cuatro etapas, como se muestra en la siguiente figura:
Los requisitos de medición se refieren al rango de medición y el grado de medición utilizados para medir el sistema de simulación, y el rango de medición se utiliza para aclarar los límites del sistema de medición;
La construcción del sistema de medición consiste en descomponer los requisitos de medición y realizar cálculos sistemáticos en el rango de medición definido, incluida la adquisición de datos de medición, la construcción de modelos de puntuación y la selección de factores de peso;
La verificación del efecto de la medición consiste en aclarar el sistema de medición, a través de múltiples rondas de experimentos de medición, se ha calibrado la fórmula y finalmente se busca el modelo que sea más consistente con los resultados esperados;
La construcción de la arquitectura de medición es la implementación de ingeniería del sistema de medición, incluidas las opciones de arquitectura, la construcción de la arquitectura y la implementación de la lógica empresarial.
Aclarar los requisitos de medición.
El proceso de mejora del grado de simulación de las pruebas de estrés de enlace completo se puede dividir en tres nodos principales en resumen:
Se ha mejorado la cobertura . La cobertura de la prueba de estrés de enlace completo inicial se centra en 8 dimensiones. El estándar de medición depende del valor de la brecha de la comparación entre el tráfico pico real y el tráfico en línea. Impulsados por las necesidades comerciales, hay muchos subjetivos. verificaciones, y los objetivos se basan principalmente en la cantidad de interfaces y categorías.
Después de ver el problema claramente , después de que la cobertura de diferentes dimensiones haya aumentado a un cierto nivel, comenzamos a prestar atención al efecto de las pruebas de estrés y a analizar los puntos débiles de las pruebas de estrés, para realizar mejoras direccionales. Durante este período, Creamos una serie de productos de visualización basados en datos de 8 dimensiones para ayudarnos a ver claramente la pregunta de las pruebas de estrés.
Orientarse a objetivos no es suficiente para ver el problema con claridad, también necesitamos un conjunto de sistemas de medición de indicadores para cuantificar el grado actual de simulación y establecer un valor objetivo anual razonable basado en la situación actual para generar tracción. Esto también conduce al sistema de medición del grado de simulación. Dentro del alcance del estándar de dimensión de mejora original, con base en la situación actual de la infraestructura y las consideraciones de costos de implementación técnica, finalmente determinamos cinco dimensiones mensurables y realizamos un segundo desmontaje. como sigue:
Cobertura de interfaz (cobertura de interfaz de prueba de presión, grado de simulación de logro de tráfico [enrutador, inrouter])
Cobertura de escenarios (definición de escenarios, tráfico de escenarios, comparación de tráfico)
Cobertura de categorías (categoría obras completas, categoría tráfico, comparación de tráfico)
Cobertura del enlace (dimensión de interfaz, dimensión de tráfico)
Cobertura del módulo (cobertura de tráfico del módulo, cobertura de interfaz del módulo, dimensión de recursos (cpu\memoria))
Construcción del sistema de medición.
Encuesta de Métricas
normalización de datos
Antes de realizar una medición de simulación, es necesario considerar primero la normalización de los datos, el propósito es:
Positivo (procesamiento consistente): se refiere a la unificación de los tipos de indicadores de evaluación, de modo que el valor del atributo se correlacione positivamente con la precisión de la medición.
Adimensional: diferentes indicadores, diferentes unidades
Normalización: diferentes indicadores, diferentes valores
Selección de método
Selección de argumentos de fórmula de puntuación
Para el índice de logro del tráfico de la interfaz, desde el punto de vista de los atributos, es adecuado para una transformación intermedia. Esperamos que cuanto más cerca esté el tráfico total del tráfico objetivo, mejor será la finalización de este índice. En este momento, tenemos Dos métodos de cálculo para elegir.
En el primero, se puede utilizar como variable independiente el valor absoluto de la diferencia entre el caudal total y el caudal objetivo; en el segundo, se puede utilizar como variable independiente la relación entre el caudal total y el caudal objetivo. Sin embargo, a juzgar por el rendimiento de los datos de tráfico, utilizando el valor absoluto de la diferencia, la diferencia entre los puntos de muestra es demasiado grande, lo que hace que los datos después de la normalización se concentren y dispersen en un punto, la mayoría de los cuales son 100. puntos, como se muestra en la siguiente figura:
Por tanto, utilizamos el ratio como variable independiente y se mejora el problema, como se muestra en la siguiente figura:
Preprocesamiento de datos métricos
Predicción de flujo de medición de presión
En general, el flujo máximo de la factura emitida por la prueba de presión aumentará en un cierto porcentaje en función del valor máximo de los días festivos históricos, sin embargo, dado que el valor máximo de la prueba de presión nunca ha aparecido en línea, si el negocio en línea El sistema puede predecir el nivel de agua y el caudal de la prueba de presión, lo que puede mejorar en gran medida el grado de precisión de la simulación.
Hay una estimación especial dentro de Didi. De acuerdo con el crecimiento histórico del tráfico, se introducen factores como el clima y los términos solares para estimar el tráfico en el próximo mes. Con base en este modelo de pronóstico de oferta y demanda, consideramos factores de vacaciones y fluctuaciones de crecimiento para minimizar el objetivo Calcule el error entre la función y la curva de flujo real para obtener la curva de crecimiento de flujo y el valor máximo de interfaz más probados con presión. Se han realizado múltiples rondas de verificaciones en días festivos reales y el error de los indicadores comerciales principales es inferior al 5%.
Implementación del modelo de pronóstico de tráfico y resultados de verificación de efectos.
El pronóstico de tráfico también es una ingeniería de sistemas relativamente grande, por lo que no lo discutiré en detalle aquí. Lo que debe enfatizarse aquí es que el pronóstico de tráfico es la predicción del estado ideal del tráfico en línea, pero la situación real en línea es mucho más. complicado Cualquier cambio en línea o anomalía en línea afectará los resultados de predicción de tráfico, tales como:
Durante el período pico de vacaciones, el tráfico es demasiado grande, la ejecución comercial y otras operaciones se degradan y el modelo de tráfico en línea cambia enormemente;
En el negocio de coincidencia de pedidos, si el servicio subyacente en la parte posterior sufre un embestido/inactividad/avalancha, el enlace frontal recibirá un impacto mucho mayor que el tráfico estimado.
Reducción de ruido de datos
Después de utilizar la proporción como variable independiente, aún se encuentra que la distribución de puntajes no es uniforme y se otorga una gran cantidad de puntajes de 95 a 100. Después de analizar los datos, se encuentra que hay valores atípicos individuales con una gran proporción, que afecta la distribución general. Elimina estos puntos Luego, mira la distribución.
Después de eliminar los valores atípicos, la muestra general se distribuye uniformemente según la regla de puntuación percentil. Por lo tanto, para estos valores atípicos cuyo valor proporcional es mucho mayor que la mayoría de los datos, no podemos incluirlos en los datos de muestra para el cálculo. Según la situación comercial específica, los datos deben eliminarse o agregarse a la lista blanca. para cálculos adicionales, consideración separada.
Generalmente, tratamos este tipo de ruido como ruido, y el método de eliminación de ruido utiliza principalmente filtrado de tráfico, listas blancas y negras, establecimiento de umbrales o preprocesamiento de datos .
filtrado de tráfico
Para algunos datos cuyo caudal es demasiado pequeño, se filtran directamente. Debido a que el caudal de estos datos es demasiado pequeño, bajo presión normal, la proporción es extremadamente alta. Si la proporción es demasiado alta, afecta el peor índice del La fórmula causará que otros El indicador no sea tan bueno y se otorgue una puntuación alta. En la Figura 2 a continuación, se puede ver que una gran cantidad de puntuaciones están por encima de 95, lo que hace que los usuarios se sientan menos objetivos.
Figura 1
Figura 2
Por lo tanto, se filtran el enrutador <100 y el enrutador <500, y después del filtrado se obtiene la Figura 4. La situación actual de puntuación está más en línea con las expectativas.
imagen 3
Figura 4
lista en blanco y negro
Para los datos de algunos escenarios, no se puede obtener el tráfico o, por algún motivo, no se puede realizar la prueba de presión, como escenarios comerciales de llamadas de automóviles fuera de la red o algunas llamadas de tareas fuera de línea, etc. Estos datos se agregan a la lista negra y no se incluyen en el cálculo de la fórmula de cálculo de puntaje; para interfaces de poco tráfico pero principales, este tipo se procesa agregando blanco para evitar ser identificado como tráfico de baja frecuencia y ser filtrado.
Umbral y preprocesamiento de datos
Para el resultado final de la puntuación, esperamos tener una puntuación fija, que no afectará la puntuación de los elementos previamente puntuados debido al aumento de nuevas muestras. Por lo tanto, para el elemento max|xk| de la fórmula de transformación intermedia, se establece un umbral, x = 7, y cuando x es mayor que 7, la puntuación es 0 puntos.
Al observar los resultados de la puntuación, se encuentra que las puntuaciones de los dos casos de 0<x<2 y 2<x<7 son bastante diferentes, por lo tanto, para el caso de 0<x<2, sea x=1 /x, esto resuelve el problema de que las puntuaciones de los dos casos de 0<x<2 y 2<x<7 tienen una gran diferencia.
Al analizar los datos de cobertura del enlace, encontramos que algunas interfaces no tienen tráfico en la línea o el tráfico es muy bajo, estas interfaces no deben incluirse en el módulo de cobertura del enlace. Por lo tanto, hemos diseñado reglas de filtrado, tomando como referencia el tamaño del tráfico de entrada del enlace principal, personalizando las reglas de filtrado, como menos del 1% o 2% del tráfico de entrada del enlace principal como condición de filtrado, y estableciendo un máximo umbral al mismo tiempo, cuando el enlace principal Cuando el tráfico por carretera es relativamente grande, la condición del filtro de tráfico aumentará, por lo que configuramos la condición del filtro en un máximo de 100 qps, y cuando exceda 100, se procesará como 100 .
Antes de filtrar
Después de filtrar
Construcción de modelos métricos
cobertura de interfaz
La cobertura de la interfaz se define como observar la cobertura de la prueba de estrés desde las dimensiones del enrutador y del enrutador y se divide principalmente en dos partes: una es la cobertura del modelo de prueba de estrés en la interfaz de la capa de acceso, la otra es si la prueba de estrés el tráfico alcanza el objetivo esperado, lo que refleja el modelo de prueba de estrés o si la configuración de la escena es razonable. La configuración del objetivo de medición de presión utiliza la capacidad de pronóstico de tráfico y la fórmula de cálculo de cobertura de interfaz es
Entre ellos 
, representa el grado de logro del tráfico, que es 
la fórmula para calcular el logro de la interfaz, y 
es la relación entre el tráfico total (tráfico de medición de presión + tráfico en línea) y el tráfico objetivo, k es la expectativa óptima de x, y y es el peor umbral de x. Factor de peso, establezca diferentes pesos según los diferentes niveles de la interfaz, lo que 
representa el cálculo del peso. 
Para la cobertura de la interfaz, generalmente se introduce un factor de peso y finalmente se calcula el valor real de la cobertura de la interfaz multiplicando las dos dimensiones.El 
efecto final es el siguiente:
Efecto de cobertura de interfaz
Flujo de medición de presión y curva de flujo previsto
cobertura del módulo
Para la cobertura del módulo, la idea central es analizar la correlación entre los cambios en los pedidos comerciales, el consumo de recursos de hardware de la máquina y los cambios en el tráfico del módulo durante los períodos pico o los picos de vacaciones, y utilizar el modelo de prueba de estrés para realizar el ajuste. El núcleo debe considerar la adecuación del volumen de negocios frente al tráfico de módulos, y la adecuación del volumen de negocios frente al uso de recursos.
Aquí, el uso de recursos considera principalmente el uso de la CPU, y el tráfico del módulo se divide en dos dimensiones: la tasa de cobertura de la interfaz de prueba de presión del módulo y el ajuste entre el tráfico total de prueba de presión del módulo y el tráfico en línea. El algoritmo de grado de ajuste es el siguiente:
Grado de adaptación de la interfaz del módulo, el tráfico del módulo y el volumen de negocio:
Realice un ajuste lineal en el período pico en línea (como el pico del viernes por la noche) en comparación con el volumen de facturación de tiempo y el tráfico de cada interfaz, enlace y módulo, y genere una ecuación, una ecuación extensa: y = w'x+e
Calcule el valor de R cuadrado utilizando el flujo real del período pico del módulo y el flujo predicho calculado por la ecuación anterior. El algoritmo es: , el valor del
resultado es [-∞,1], el mapeo es [0- 100], y el resultado es menor que 0 (el efecto es peor que la diferencia promedio), y el valor predeterminado es 0 directamente.
Grado de ajuste entre el uso de CPU del módulo y los pedidos comerciales:
Realice un ajuste lineal en el período pico en línea (como el pico del viernes por la noche) y la cantidad real de núcleos de CPU utilizados por cada módulo para generar una ecuación y una ecuación extensa: y = w'x+e
Calcule el valor R cuadrado utilizando el número de núcleos de CPU en comparación con las horas pico de cada módulo y el tráfico previsto calculado en el paso anterior (el
efecto es peor que la diferencia media), el valor predeterminado es 0 directamente.
Cuanto mayor sea el grado de ajuste, mayor será la relación entre el representante y el volumen de negocio, y más precisos serán los resultados de la previsión de tráfico, por lo que dividimos los núcleos de cobertura del módulo en dos categorías:
La primera categoría: el grado de ajuste es mayor que 0,7
Calcule los valores predichos utilizando la ecuación de ajuste (y = w'x+e en los cálculos de bondad de ajuste)
Utilizando el cálculo variante de MSE, MSE se reconoce actualmente en la industria como un algoritmo estricto para evaluar el grado de ajuste r = 1- 1/n∑((Yy)/y)²
La segunda categoría: el grado de ajuste es inferior a 0,7
Calcule el período pico promedio en línea, el tráfico pico y la CPU, obtenga FlowAver, FlowMax, CpuAver, CpuMax
Calcule el valor promedio, el flujo máximo y la CPU del final del tiempo de medición de presión y obtenga PreFlowAver, FlowMax, etc.
R = 0,5*abs(PreFlowAver - FlowAver) / FlowAver + 0,5*abs(PreFlowMax - FlowMax) / FlowMax
Método de cálculo del grado de simulación de esta dimensión.
El efecto de aterrizaje real es el siguiente:
cobertura del enlace
La cobertura del enlace se refiere al ajuste entre la dirección del tráfico de la prueba de estrés del enlace y el tráfico en línea. El propósito principal es ver la cobertura del enlace central desde la capa de acceso de entrada hasta la capa de almacenamiento final, para ayudar a los estudiantes de la prueba de estrés a descubre el enlace Puntos débiles en la cobertura de carreteras, los siguientes son varios escenarios comunes que afectan la puntuación:
Los escenarios de las pruebas de resistencia y las características de los usuarios no están completamente cubiertos y no se ha implementado cierta lógica;
Factores como anomalías de enlaces, configuraciones de pruebas de estrés del servicio y configuraciones en línea son inconsistentes, lo que resulta en inconsistencias con la lógica en línea;
Se ha realizado un procesamiento especial para el enlace de la prueba de estrés.
El principio de cálculo de la puntuación de cobertura del enlace es el mismo que el de la cobertura de la interfaz del módulo. Al calcular el grado de ajuste entre el flujo comercial y cada interfaz, finalmente se calcula el valor del flujo del nivel de agua de la medición de presión de la interfaz para determinar si la interfaz esta cubierto. Al calcular la puntuación total del enlace, se introduce el factor de ponderación para calcular la cobertura del enlace:
Hay varios enlaces en la dimensión del enlace y luego calcule la puntuación de simulación de la dimensión del enlace de acuerdo con el peso del enlace:
Diagrama de topología de cobertura de prueba de presión de enlace único
Representaciones de pantalla frontal de cobertura de prueba de presión de enlace
Cobertura de categoría y escena
Para categorías y escenarios, es la relación real en la línea de referencia antes de la prueba de estrés, incluido el valor esperado del nivel del agua de la prueba de estrés, que es relativamente claro. Solo necesita ajustar el modelo de prueba de estrés por adelantado antes de la prueba de estrés y calcular la categoría, la cobertura de la prueba de estrés del escenario y el logro del objetivo. El factor de peso está determinado por el tráfico. Cuanto mayor sea el tráfico, mayor será el peso.
Entre ellos 
está el flujo 
y el peso. El factor de peso de la cobertura de la escena está determinado principalmente por el tamaño del flujo. Por lo tanto, 
la relación entre el flujo del elemento actual y el flujo total se utiliza como peso 
. Cuanto mayor sea el caudal, mayor será la proporción.
Demostración del efecto general
Efectos de medición de simulación (Beta)
Resumen y perspectivas
Basado en los escenarios comerciales de Didi y la implementación de pruebas de estrés de enlace completo, la construcción del grado de simulación es una parte indispensable de las pruebas de estrés de enlaces de circuito cerrado. Al evaluar cuantitativamente el grado de simulación en las cinco dimensiones de interfaces, enlaces, módulos, categorías y escenarios, es posible explicar la cobertura de la prueba de estrés con datos objetivos hasta cierto punto y mejorar la calibración del modelo de prueba de estrés y la prueba de estrés. cobertura para estudiantes de turno brindar mayor asistencia.
Sin embargo, el entorno en línea es complejo y variado, y estas dimensiones por sí solas no son suficientes. Necesitamos continuar explorando otras dimensiones de datos, pulir la precisión de la simulación y aprovechar el valor de la simulación, utilizando la simulación como un conjunto de capacidades de plataforma. Potenciar las empresas periféricas.
En términos de mejora de la precisión y extracción de valor del grado de simulación, partiremos de los siguientes aspectos:
Mejora de la precisión: amplíe el límite de la dimensión, acceda a las dimensiones del uso total de recursos de la sala de computadoras IDC, el uso de la red (como el ancho de banda de la línea alquilada) y el tráfico general de la capa de acceso.
Minería de valor: ajuste inteligente del modelo de pruebas de estrés, asistencia a las pruebas de estrés inteligentes y reducción de los costos de las pruebas de estrés; uso de capacidades de pronóstico de tráfico y planificación de capacidad para ayudar en la calibración de los valores límite actuales del negocio periférico y la evaluación previa de los riesgos de capacidad; detectar cambios importantes en el tráfico comercial y dar advertencias oportunas, etc.
La construcción del grado de simulación es inseparable de la cooperación de todas las partes dentro de Didi. Gracias a la plataforma de prueba de presión del grupo, al equipo de datos, al equipo comercial y al equipo de servicio básico por su ayuda y apoyo, y esperamos con interés los esfuerzos conjuntos de todas las partes. para mejorar la construcción de grados de simulación, permitiendo negocios.
FIN
Introducción al departamento
Este artículo proviene del equipo de calidad de etapa intermedia de tecnología de viajes de transporte de automóviles en línea. Como equipo de investigación y desarrollo de negocios de transporte de automóviles en línea, la tecnología de viajes crea una plataforma de experiencia para el usuario final, ecología de productos para el usuario final C, B- Ecología de suministro de capacidad final, ecología de seguridad de viajes y gobernanza de servicios Ecología y sistema de garantía central para crear una plataforma de viajes que sea segura, confiable, eficiente, conveniente y confiable para el usuario.
Ofertas de trabajo
Estamos reclutando para el backend del equipo y los requisitos de prueba. Los socios interesados pueden unirse. Puede escanear el código QR a continuación y enviar su currículum directamente. ¡Esperamos que se una!
Ingeniero I+D
Descripción del trabajo:
1. Responsable de la investigación y el desarrollo de antecedentes de sistemas comerciales relacionados, incluido el diseño, el desarrollo, el control de la complejidad y la mejora del rendimiento del sistema y la eficiencia de la investigación y el desarrollo de la arquitectura comercial;
2. Con sentido empresarial, a través de continua investigación e innovación técnica, mejora iterativamente los datos centrales del negocio junto con los productos y operaciones.
Ingeniero de desarrollo de pruebas
Descripción del trabajo:
1. Construir un sistema de garantía de calidad aplicable al negocio de transporte de vehículos en línea, formular y promover la implementación de soluciones técnicas de calidad relevantes y continuar garantizando la calidad del negocio;
2. Comprensión profunda del negocio, establecer comunicación con varios roles en el negocio, resumir los problemas y puntos débiles del negocio, crear valor para el negocio de manera integral y trabajar sin límites fijos;
3. Mejorar la calidad del código comercial y la eficiencia de la entrega mediante la aplicación de una infraestructura de calidad relevante;
4. Precipitar soluciones de prueba eficientes y proporcionar soluciones generalizadas para respaldar aplicaciones de aterrizaje en otras líneas de negocios;
5. Resolver problemas difíciles y problemas técnicos complejos en el aseguramiento de la calidad empresarial;
6. Exploración con visión de futuro en el campo de la tecnología de calidad.
