antecedentes
"El Double 11 de este año es una súper explosión de los centros comerciales de contenido más grandes del mundo. Cada segundo hay una fuerte resonancia entre los consumidores, la tecnología, el contenido y la ecología empresarial. La superposición de tiempo real, complejidad y picos continuos lo convierte en un Pico tecnológico. En el Double 11 en 2020, el pico de transacciones de Alibaba alcanzó las 583.000 transacciones por segundo, y los vínculos comerciales detrás de él también están bajo una presión sin precedentes ". El vicepresidente de Alibaba, Tang Xing, describió el Double 11 de este año.
El dominio comercial de los comerciantes de Ali incluye casi 20 líneas comerciales del grupo, más de 100 escenarios y más de 400 enlaces. Algunas empresas están profundamente integradas en la guía de compras y los enlaces de transacciones. El negocio de enlaces comerciales cubre a decenas de millones de comerciantes y cientos de socios de proveedores de servicios externos principales. En el pasado, debido a la "diferencia de nivel de agua" entre la plataforma y la infraestructura de TI del comerciante, era difícil para la plataforma ayudar al comerciante en la transformación y actualización del sistema y la aceptación total del enlace. Dado que Alibaba ha lanzado una nueva generación de sistemas de infraestructura digital para comerciantes y socios ecológicos, con la ayuda de motores de tecnología nativa en la nube y capacidades de gobernanza de TI en la nube para ayudar a comerciantes y socios ecológicos a reconstruir la línea de base de alta disponibilidad del sistema, cada vez más comerciantes Las capacidades de procesamiento de datos a gran escala de Ali de la misma magnitud.
En las preparaciones convencionales, cada empresa se basa en pruebas de estrés de un solo enlace, carece de interoperabilidad, carece de control general y es propensa a puntos ciegos de calidad, los peligros ocultos son fáciles de ignorar y los riesgos son altos. Los problemas en el enlace del comerciante afectan directamente las capacidades de producción y operación del comerciante y causan un daño significativo en la experiencia de comerciantes y consumidores. La prueba de resistencia de enlace completo en la industria generalmente se enfrenta al escenario del lado C, y el escenario del lado B a menudo no recibe suficiente atención. La estructura de la escena en el lado comercial es extremadamente compleja, involucra sistemas internos y muchos sistemas tripartitos, y la realización de pruebas de tensión de enlace completo enfrenta muchos desafíos. Para prevenir riesgos de manera efectiva, mejorar la estabilidad del sistema de varias empresas y socios tripartitos, y mejorar la experiencia del usuario, este año hemos superado numerosas dificultades y realizado pruebas de resistencia de enlace completo para enlaces comerciales por primera vez.
desafío
▐ Dificultades centrales
El negocio comercial cubre una variedad de formas comerciales, como herramientas comerciales, mensajería, multimedia y algoritmos. Las llamadas entre aplicaciones son intrincadas y complejas. Cómo solucionar la dependencia del enlace principal y garantizar que no se pierda el enlace principal es el principal desafío para realizar pruebas de estrés.
En la implementación de las pruebas de estrés, cómo simular la superposición y el acoplamiento de cientos de escenas de tráfico, y dejar espacio para la operación en respuesta a emergencias, y al mismo tiempo, llevar el tráfico al pico en lotes es un gran desafío para la implementación de las pruebas de estrés.
El negocio comercial involucra los sistemas de muchos proveedores de servicios asociados. La complejidad del ecosistema de Alibaba hace que la arquitectura del sistema de los proveedores de servicios conectados a la plataforma Alibaba tenga varios desafíos técnicos, como heterogeneidad, diversificación y grandes diferencias de rendimiento. Cada proveedor de servicios es Hay diferencias en la percepción sexual.
▐ Solución
En respuesta a los desafíos anteriores, nuestras soluciones principales son:
Especificaciones de proceso uniformes, coordinación de organizaciones de pruebas de estrés y revisión de aceptación unificada.
Integración de medición de presión de soporte de herramienta.
Las pruebas de estrés cubren planes, limitación de corriente, simulacros, seguimiento, etc., para simular la situación real de gran promoción.
Solución de prueba de esfuerzo de enlace completo
1. Especificación de proceso unificada
Cada empresa participa en la prueba de resistencia de enlace completo para aclarar los estándares de acceso y acceso. El principio básico de admisión de la prueba de resistencia de enlace completo: en cada escenario, la prueba de resistencia de enlace único puede ingresar a la prueba de resistencia de enlace completo. Los estándares de cuasi-salida incluyen: nivel de agua del sistema, tasa de flujo, tiempo de respuesta, tasa de aciertos de caché, límite de corriente, indicadores jvm, etc. El sistema del proveedor de servicios es consistente con los estándares del sistema Ali.
En el proceso, se unifican la revisión de la escena, la revisión del enlace, la prueba de presión del enlace completo y la revisión, y los problemas de la revisión se optimizan y resuelven simultáneamente.
2. Integración de soporte de herramientas
Basándonos en las capacidades de prueba de estrés existentes del grupo, nos enfocamos en construir una herramienta de prueba de estrés integral en análisis de enlaces comerciales, evaluación de tráfico, modelo de prueba de estrés, automatización de verificación de resultados, etc., para resolver los problemas centrales de las pruebas de estrés de enlace completo de los comerciantes .
Análisis de enlaces
Principios básicos para seleccionar escenarios de pruebas de resistencia:
Escenario de alto tráfico
Escenario de enlace principal
Escenarios de vínculos comerciales complejos
Escenario de difusión del tráfico.
Con referencia a los principios anteriores, desarrollamos una herramienta de recomendación de escenarios de análisis de enlaces basada en el soporte del middleware del grupo, y utilizamos la verificación manual + herramienta para generar el modelo de enlace. El principio esquemático es el que se muestra en la figura siguiente: Utilizando una llamada de una determinada interfaz de A, podemos obtener el rastro de su aplicación descendente, la base de datos o caché a la que se accede, y analizar la amplificación del tráfico descendente por una llamada.
Diagrama de enlace
Su flujo de trabajo es el siguiente:
El tráfico estadístico solicita servicios, almacenamiento y otros indicadores, obtiene la cantidad de llamadas descendentes y obtiene la amplificación de las solicitudes descendentes.
Obtenga enlaces de entrada cuyo tráfico supere un determinado umbral.
Obtenga la profundidad del enlace de llamada o el enlace cuya llamada depende de más de un cierto umbral.
Obtenga enlaces donde la doble llamada sea mayor que cierto umbral.
Evaluación de flujo
La evaluación del tráfico convencional generalmente se basa en el monitoreo y las llamadas ascendentes para evaluar el tráfico de la interfaz. La evaluación es ideal y propensa a errores. Si la tasa de flujo inicial no se estima adecuadamente, la medición de presión no alcanzará el objetivo o superará con creces el valor objetivo. Es demasiado costoso confiar en la medición de presión para encontrar estos problemas. En este sentido, hemos introducido el aprendizaje automático profundo, utilizando capacidades de algoritmos para realizar predicciones inteligentes y una evaluación del tráfico más precisa. Su principal principio de funcionamiento es el siguiente:
Tome el flujo de entrada y salida de la aplicación, RT, QPS, tasa de error, nivel de agua del sistema de aplicación y otra información.
Aplique el aprendizaje automático profundo para analizar y aprender datos básicos para producir un modelo de algoritmo para la aplicación. El modelo puede estimar el flujo de salida y el nivel de agua del sistema de aplicación en función del flujo de entrada. El efecto se muestra en la figura.
Cuadro comparativo de simulación de tráfico de interfaz
Sus ideas centrales son:
El algoritmo aprende y optimiza continuamente de acuerdo con datos reales en línea todos los días para generar modelos confiables.
El usuario ingresa el flujo estimado de la interfaz y la plataforma genera el flujo estimado de la interfaz aguas abajo, el QPS de almacenamiento, la cantidad de máquinas y el nivel de agua del sistema.
Construcción del modelo
Combinando escenarios de negocio, hemos establecido dos modelos de prueba de estrés: modelo de punto 0 y modelo de punto distinto de cero. El modelo de punto 0 implica escenarios en los que el tráfico alcanza su punto máximo a las 0:00, mientras que los escenarios del modelo de punto distinto de cero alcanzan su punto máximo en otros momentos. El diseño del modelo de prueba de esfuerzo no es un servicio de cobertura simple, sino que también debe considerar el acoplamiento de flujo entre varios servicios. Para los enlaces con relaciones ascendentes y descendentes, el tráfico de medición de presión descendente también proviene del flujo ascendente. Además de considerar el acoplamiento de tráfico dentro del dominio comercial, también se debe considerar el acoplamiento de tráfico de otros dominios del grupo. Por lo tanto, existen muchos planes de prueba de presión para controlar la admisión y salida del flujo de prueba de presión.
Si hay un acoplamiento de flujo, es necesario considerar el flujo de acoplamiento insuficiente, no siempre que se mida la presión aguas arriba habrá suficiente flujo aguas abajo. Al tiempo que garantiza la capacidad de acoplar el tráfico ascendente, la propia empresa descendente también debe tener la capacidad de complementar el tráfico.Cuando el tráfico ascendente es insuficiente, puede complementar el tráfico suficiente para cumplir con la verificación de su propio sistema.
3. Ejecución de la prueba de presión
Los datos de la prueba de presión se preparan para usar la plataforma Phoenix [ver apéndice 1] desarrollada por el Departamento de Calidad Técnica del Departamento de Tao para registrar el tráfico en línea para la "panorámica", y los datos de la escena son más realistas y efectivos. La grabación también mejora la eficiencia de la preparación de datos, registrándola una vez y utilizándola varias veces. En la gestión de escenas, una persona y una tecla ejecutan todas las escenas, lo que ahorra mucho personal. Cada prueba de estrés de enlace completo de comerciantes, transacciones y guías de compras se llevará a cabo simultáneamente, y todo el tráfico a las 0 en punto se alcanzará al 100% para verificar la dependencia y superposición del tráfico en los dominios comerciales. El tiempo desde el inicio de la prueba de presión hasta que el caudal alcanza el 100% es muy limitado En la etapa inicial de la prueba de presión, generalmente hay muchos problemas en este proceso. Estos problemas son difíciles de encontrar en el proceso de preparación preliminar. Los principales problemas son los siguientes:
Distribución de presión desigual.
Modelo de ajuste urgente.
El archivo de datos se corrige urgentemente.
La máquina de prueba de presión individual es anormal.
Afectado por la medición y el control de la presión, la invocación del servicio es limitada.
Gestión de emergencias y control de tareas de pruebas de estrés.
Los ejecutivos deben controlar las empresas no afectadas para continuar presionando según lo planeado, y deben emitir juicios rápidos sobre los problemas que surgen y brindar soluciones. Para las escenas que se pueden corregir rápidamente, primero elimínelas de la actividad de prueba de esfuerzo por separado y vuelva a asociarlas con la tarea de prueba de esfuerzo después de que se complete el ajuste. Para escenas que no se pueden corregir rápidamente, es necesario coordinar rápidamente a los estudiantes de negocios para que realicen operaciones de enlace único. Afectados por los problemas anteriores, es necesario formular diferentes estrategias de respuesta in situ, que incluyen principalmente las siguientes situaciones:
Durante la prueba de esfuerzo, una escena debe descargarse con urgencia y quedan otras escenas.
Durante el proceso de prueba de estrés, un escenario determinado no cumplió con el objetivo, pero los recursos del sistema ya se habían atascado. Era necesario mantener el nivel de presión para solucionar problemas, y el resto del negocio continuó aumentando la presión.
Cuando la presión se eleva al 100%, las empresas individuales no cumplen con las expectativas y deben seguir aumentando la presión.
Este tipo de problema ocurre con mucha frecuencia durante el proceso de prueba previa a la tensión. Si la preparación previa no está en su lugar, bloqueará el ritmo de la prueba de presión.
Además, la prueba de estrés full-link cuenta con un completo sistema de seguimiento desde el cliente (tasa de éxito, cantidad de error, opinión pública, etc.) hasta el servidor (tasa de éxito de la interfaz, tasa de éxito del middleware, nivel de agua, etc.), evitando solo prestar atención a la disponibilidad del servicio e ignorar a los clientes. El final y el usuario experimentan el punto ciego que se ve afectado.
Entre los cientos de escenarios de prueba de estrés de enlace completo de los comerciantes, los mensajes, los programas abiertos y los applets se encuentran algunos escenarios de prueba de estrés no convencionales típicos, que son difíciles de implementar. A continuación, centrémonos en la prueba de estrés de enlace completo de estos escenarios. Práctica de prueba.
▐Escenario principal 1: Prueba de presión de enlace completo de extremo a extremo del sistema de mensajería IM
La prueba de presión del lado del servidor tradicional suele ser una prueba de presión de enlace corta de tipo http o tcp, es decir, el cliente solicita una vez y la conexión se cierra después de la devolución. Sin embargo, este método no es adecuado para la prueba de presión del sistema de mensajería de mensajería instantánea. El sistema de mensajería instantánea establece una conexión prolongada con el servidor. Cuando el usuario A envía un mensaje al usuario B, el usuario B recibe pasivamente el empuje del servidor en lugar de hacerlo de forma activa. Al extraer datos, este modo es muy desafiante para la implementación de pruebas de estrés.
Para solucionar este problema, desarrollamos los clientes ligeros de Shoutao y Qianniu basados en NIO, los cuales simulaban usuarios reales para mantener una conexión larga con el servidor en el servidor, y parametrizaban parte de la lógica empresarial y los integraban en el cliente ligero. Por ejemplo, después de que el cliente ligero recibe el mensaje push, responde con un ACK, lo que indica que el mensaje ha sido recibido y que el mensaje se ha leído de acuerdo con la tasa de lectura.
Cliente ligero de conexión larga
La prueba de esfuerzo de enlace de mensaje debe simular que el cliente mantiene una conexión prolongada después de iniciar sesión. En la actualidad, las herramientas de prueba de esfuerzo convencionales de la industria no son aplicables al escenario de mensaje y se requieren herramientas de desarrollo independientes. El programa principal es el siguiente:
Desarrolle un cliente ligero integrado en el motor de pruebas de estrés para simular escenarios de un extremo a otro
-
Simular respuesta de mensaje
Se ha leído el mensaje simulado
Itinerancia de mensajes simulada
El motor de pruebas de estrés se implementa en el nodo CDN para simular que los usuarios reales envían y reciben mensajes.
Cree una conexión larga para simular la conexión larga real del usuario en línea
Diagrama de arquitectura de prueba de presión de conexión larga
Servicio de mensajes de enlace completo abierto
Además del enlace de mensaje completo, incluye servicios básicos de mensajes como el enlace ascendente y descendente de mensajes, los mensajes que se han leído y no leído, los modelos de contenido del mensaje (texto, tarjetas, mensajes multimedia), itinerancia de mensajes y otros servicios básicos de mensajes, como robots, derivados de las dos partes del grupo y los tres socios. Asistencia inteligente, verificación de pedidos, modificación de direcciones, atención al cliente inteligente y otros servicios de mensajería.
Gráfico empresarial de mensajes
Debido a la complejidad del negocio de los mensajes, necesitamos coordinar los datos de la prueba de presión de varias partes comerciales durante la prueba de estrés para ajustar la presión de cada parte comercial durante la prueba de esfuerzo real. Por ejemplo, una determinada cuenta ha activado el servicio A y el servicio B, y el mensaje enviado a la cuenta ha llegado a dos servicios, provocando que el tráfico se superponga y el resultado final de la prueba de esfuerzo sea inexacto. Para solucionar este problema, hemos unificado los scripts de prueba de estrés del servicio de mensajes y solucionado una serie de problemas como la interferencia mutua de la superposición de tráfico y la imposibilidad de reutilizar scripts de varias líneas de negocio asignando cuentas, abriendo servicios e iniciando tráfico de manera uniforme de manera uniforme. .
▐Escenario principal 2: prueba de esfuerzo de enlace completo de proveedor de servicios de tres partes
El negocio de comercio electrónico de Taoties es un vínculo ecológico que abarca a consumidores, plataformas, comerciantes y proveedores de servicios de terceros. Con la ayuda de la interfaz abierta de la plataforma, los proveedores de servicios de tres partes pueden desarrollar herramientas de soporte de comercio electrónico para la gestión de clientes, gestión de pedidos y marketing interactivo para ayudar a las empresas a mejorar la eficiencia operativa. Para realizar la garantía de enlace completo para los comerciantes, es necesario impulsar y capacitar a los proveedores de servicios de terceros para que participen en la prueba de esfuerzo de enlace completo.
Diagrama de interacción ecológica de comercio electrónico Amoy
Solicite la prueba de presión de enlace completo de empuje
El núcleo de los muchos escenarios que involucran a las tres partes es el escenario del pedido.El enlace de envío de pedido completo cubre todo el proceso desde que los consumidores realizan un pedido en Taobao para recibir los productos. El enlace cubre múltiples sistemas internos y externos, directamente relacionados con la experiencia de compra de los consumidores, y la importancia de las pruebas de resistencia es evidente.
Orden push diagrama de interacción de enlace completo
La prueba de presión de enlace completa del empuje de pedidos se enfrenta a los siguientes puntos débiles:
-
Hay una gran cantidad de proveedores de servicios y no existe una herramienta de prueba de resistencia unificada.
El modelo de orden de prueba de presión es difícil de construir y tiene poca precisión.
Es difícil recopilar los resultados de las pruebas de esfuerzo, la carga de trabajo del análisis de datos es grande y los estándares no son uniformes.
Con este fin, hemos desarrollado una plataforma de prueba de estrés de enlace completo de envío de pedidos para empoderar a los proveedores de servicios, la plataforma tiene las siguientes características:
Generación de modelos de prueba de presión con un solo clic basados en datos de pedidos históricos, conveniente y precisa
Los usuarios solo necesitan especificar la hora de inicio y finalización de los pedidos históricos, y el sistema analizará automáticamente los datos del pedido en línea durante ese período de tiempo, y simulará y generará un modelo de pedido de prueba de presión basado en la información del comprador del pedido, el descuento y el producto.
Solicitar modelo de prueba de presión de empuje
Recopilación y análisis automáticos de datos de resultados de pruebas de presión, completos e intuitivos
La herramienta recopilará automáticamente los indicadores de medición de presión relevantes a partir de los datos de monitoreo, los comparará con los datos históricos en la etapa de análisis del informe, calculará el puntaje de calidad de la medición de presión de acuerdo con el estándar de medición de presión, producirá conclusiones de medición de presión y brindará sugerencias de optimización.
Diagrama esquemático de la generación de informes de prueba de presión de empuje de pedidos
Admite la tecnología Service Mesh, lo que hace que las pruebas de estrés en el entorno de producción sean más fáciles y seguras
La plataforma de prueba de esfuerzo admite la tecnología Service Mesh nativa de la nube. Para la transformación de prueba de esfuerzo del entorno de producción, solo se debe modificar la configuración relevante del nodo POD y no es necesario modificar el código comercial del sistema, lo que reduce en gran medida el costo de la prueba de esfuerzo del entorno de producción y reduce la posibilidad de transformación de código. Riesgo de seguridad
▐Escenario principal 3: prueba de presión del subprograma de tres partes
Los mini programas son una forma importante de apertura de Taoxi en el lado de la APLICACIÓN. Dado que los mini programas de tres partes están integrados en aplicaciones Taoxi como Shoutao y Qianniu, su estabilidad está relacionada con la estabilidad y la experiencia del usuario de la APLICACIÓN Taoxi. Debido a limitaciones técnicas y de seguridad, los proveedores de servicios de terceros no pueden realizar pruebas de estrés en línea de forma independiente en la interfaz del subprograma. Por esta razón, hemos desarrollado una pequeña plataforma de pruebas de estrés de programas para proporcionar a los socios proveedores de servicios herramientas de prueba de estrés oficiales eficientes y fáciles de usar.
La plataforma de pruebas de estrés de subprogramas de tres partes es fácil de usar, fácil de usar y altamente automatizada, lo que reduce en gran medida el umbral técnico y el costo de las pruebas de estrés de los proveedores de servicios. Sus capacidades principales son las siguientes:
El sistema analiza, crea y emite automáticamente tareas de prueba de presión en función del tráfico de la interfaz en línea.
El proveedor de servicios solo necesita editar los parámetros de la prueba de presión y realizar la tarea de prueba de presión.
Una vez que se pasa la prueba de presión y se envía el informe, el sistema establecerá el valor de protección del límite de corriente de acuerdo con el valor de flujo de la prueba de presión.
Diagrama de flujo de prueba de presión de subprograma de tres partes
Además, también organizamos una vista previa conjunta de los principales proveedores de servicios principales. A través de pruebas de estrés de enlace completo y simulación de tráfico pico del servicio, se ejercitaron varios planes de emergencia y mecanismos de comunicación para hacer frente a anomalías y emergencias que puedan ocurrir durante la gran promoción, formando un enlace de garantía completo para pruebas de estrés, cierre de red y ensayo. :
Al mismo tiempo que la prueba de presión de enlace completo, el subprograma principal de tres partes se prueba para simular un entorno de Double Eleven más realista.
Realice simulacros de situaciones anormales al mismo tiempo que las pruebas de esfuerzo: la simulación artificial presenta problemas y fallas.
Realizar el tratamiento de emergencia de problemas y averías, ejercitar la comunicación, los mecanismos de coordinación y los procedimientos de manejo de emergencias.
para resumir
Se encontraron un total de más de 130 problemas internos del sistema durante la prueba de esfuerzo de enlace completo, y todos los problemas antes de la gran promoción se resolvieron de manera efectiva. Durante todo el período de promoción, las fallas del sistema de negocios comerciales 0 y la retroalimentación de problemas comerciales disminuyeron en un 50% en comparación con años anteriores.Los comerciantes y consumidores se sintieron sedosos, defendiendo los intereses y la experiencia de los comerciantes.
Más de cien ISV principales participaron en la aceptación de la prueba de resistencia de enlace completo. La prueba de resistencia de enlace completo ayudó a los comerciantes y socios del ecosistema a reconstruir la línea de base de alta disponibilidad del sistema, lo que permitió a los comerciantes competir con Taobao en el nivel de procesamiento de información y procesamiento de datos. En el mismo nivel del agua, los comerciantes tienen las mismas capacidades de aplicación de datos a gran escala que Ali, lo que ayuda a los sistemas comerciales a encontrar y reparar miles de problemas de rendimiento y a mejorar en gran medida la estabilidad de los sistemas comerciales en términos de eficiencia y capacidades.
En el futuro, planeamos continuar optimizando en tres áreas para brindar a los comerciantes y socios mejores servicios:
1. Medición de presión inteligente basada en capacidades de algoritmo.
2. Análisis completo automatizado de escenarios, planes, limitación de corriente y resultados de pruebas de presión.
3. Monitoreo multidimensional, análisis inteligente y procesamiento de posicionamiento de información masiva de alarmas.
Anexo 1:
Phoenix Ecology utiliza las capacidades subyacentes unificadas proporcionadas por JVM-Sandbox, y todos quieren crear una ecología de capacidad atómica de módulo, que proporcione capacidades de desarrollo, administración, autenticación e implementación de módulos abiertos y rápidos (plataforma Magic's Cube). A través de la combinación de capacidades de módulo, Deriva módulos de productos de alto nivel (Phoenix Platform 2.0) como grabación y reproducción, inyección de fallas, combinación de dependencia fuerte y débil, simulacros del sistema, localización rápida de problemas y evaluación de la calidad de las pruebas (Phoenix Platform 2.0), y abre API y capacidades a datos y capacidades estándar generadas en cada enlace. Las soluciones de salida en áreas como la regresión empresarial, los simulacros ofensivos y defensivos y el gobierno de la arquitectura están comprometidos a mejorar de manera rápida y eficiente la estabilidad general del sistema.
Dirección de fuente abierta:
https://github.com/alibaba/jvm-sandbox-repeater?spm=ata.13261165.0.0.11ee30bfW4qEoF
JVM-Sandbox pertenece al marco AOP basado en la clase de tejido dinámico de Instrumentation. Al construir cuidadosamente la lógica de mejora del código de bytes, el módulo sandbox puede lograr la intercepción AOP en tiempo de ejecución no intrusivo de los métodos de aplicación de destino sin violar las restricciones de JDK.
Dirección de fuente abierta:
https://github.com/alibaba/JVM-Sandbox?spm=ata.13261165.0.0.5a094b01By8WRH
Tao Department Technical Department-Quality Team-Recruiting Talents
Responsable de garantizar la calidad comercial de todas las estaciones principales de Taobao y Tmall, donde hay escenarios comerciales ricos y diversos y desafíos técnicos. Aquí puede comprender cómo se garantiza el doble once de clase mundial. Frente al tráfico pico masivo en el doble once, se deposita el producto de garantía de estabilidad de gran promoción más desafiante. Aquí puede acompañar productos interactivos con más de 100 millones de DAU. El juego de marketing y el encanto técnico más complejo de la industria. Aquí puede ver de cerca las empresas de comercio electrónico de contenido de actualidad, ver cómo Li Jiaqi, Wei Ya, etc.se convirtieron en acciones populares, y aquí también puede explorar el negocio de primera línea y el crecimiento impulsado por big data Estrategias para construir nuevas pistas en el campo del comercio electrónico bajo la bendición de nuevas tecnologías como 3D, AI y 5G.
Aquí también trabajará con un grupo de socios excelentes. Aquí está la búsqueda definitiva de tecnología, utilizando las tecnologías y conceptos de I + D más vanguardistas de la industria, innovando métodos, herramientas y plataformas de garantía de calidad, mejorando la eficiencia de las pruebas de I + D y mejorando constantemente la experiencia del usuario. Impulsado por la tecnología, cree un sistema de calidad líder en la industria. Cualquiera de nuestras optimizaciones y mejoras beneficiará a cientos de millones de usuarios. Esperamos que se una. ¡Bienvenido a unirse a nosotros para construir juntos la calidad técnica de Taoxi! Contacto: [email protected]
✿ Más lecturas
Autor | Dahai, Trace
Editar | Naranja
Producido | Nueva tecnología minorista de Alibaba