El 13 de diciembre, el director de la plataforma de computación en la nube de Alibaba, Jia Yangqing, señaló en la cumbre Flink Forward Asia 2020 que abrazar la "convergencia" es la nueva dirección de la evolución de los datos masivos. La integración de los datos masivos y la inteligencia artificial es una tendencia inevitable, y La inteligencia artificial es Big Data: la exportación definitiva para el desarrollo empresarial. Al mismo tiempo, habló sobre la tecnología de código abierto de Flink desde diferentes ángulos, así como el desarrollo y el pensamiento futuro de la tecnología de código abierto en la era de la nube.
Comunidad de código abierto de Flink "mejorando"
Desde la perspectiva de un entusiasta común de la tecnología de código abierto, Jia Yangqing define el desarrollo de Flink en 2020 como "gradualmente mejor", lo que se refleja principalmente en tres aspectos:
tecnología. Flink realizó dos nuevos avances en tecnología este año: primero, la tecnología de integración por lotes de transmisión de Flink se aplicó con éxito en los escenarios de negocios de datos centrales de Alibaba en Double 11; segundo, el pico de computación en tiempo real de Flink superó los 4 mil millones de piezas por segundo por primera vez. En comparación con el año pasado, el rendimiento informático se ha duplicado sin aumentar el tamaño del clúster.
solicitud. Flink ya no es una tecnología de vanguardia, sino que se ha convertido en el estándar de facto para la transmisión de código abierto, que llega a los hogares de la gente común. Por ejemplo, la Academia de Tecnología de la Información y las Comunicaciones de China utilizó Flink como modelo técnico para diseñar el estándar de procesamiento de transmisión, y las empresas de computación en la nube, incluida Alibaba Cloud, utilizan Flink como motor subyacente para el procesamiento de transmisión.
Comunidad. La comunidad de código abierto de Flink ha crecido rápidamente y ha encabezado la lista de correo más activa de Apache; el proyecto Flink es uno de los principales proyectos de Apache con la mayor cantidad de envíos en Github. El año pasado, el número de participantes en Flink Forward Asia alcanzó los 2.000. El Flink Geek Challenge atrajo a más de 4000 desarrolladores a participar; este año, la conferencia se cambió a sesiones en línea y fuera de línea. Los premios del Flink Geek Challenge hicieron que todos fueran más conscientes. Cada vez más desarrolladores sienten pasión por la tecnología de código abierto y tienen el coraje de desafiar.
El código abierto hace que la nube esté más estandarizada
Jia Yangqing cree que el código abierto hace que la nube esté más estandarizada. Mencionó que la computación en la nube se está volviendo cada vez más estandarizada y muy beneficiosa para su propio desarrollo. Una gran cantidad de sistemas de tecnología de desarrollo en la nube se están volviendo cada vez más consistentes, lo que significa que es más probable que una gran cantidad de desarrolladores de computación en la nube conviertan sus propias aplicaciones en una parte de la nube después de familiarizarse con este sistema.
El código abierto ayuda a Ayun a romper su propio sistema técnico y formar un sistema técnico estándar, abierto y público sobre la base de respetar plenamente los hábitos de uso originales de los usuarios. Es muy difícil confiar en una sola empresa para establecer estándares.
¿Qué significa Alibaba Cloud para el código abierto? Jia Yangqing mencionó los siguientes tres puntos:
Desde un punto de vista organizativo , el año pasado, el Grupo ABB estableció el Comité de Tecnología de Código Abierto, que sistemáticamente clasificó y promovió la implementación de la estrategia de tecnología de código abierto del Grupo ABB desde el nivel de grupo.
Desde la perspectiva de la participación , el Grupo ABB ha adoptado ampliamente las tecnologías de código abierto para construir su propio sistema técnico desde el principio. Tomemos como ejemplo los productos de datos de la unidad de negocios de la plataforma de computación en la nube en árabe. Por ejemplo, la computación en tiempo real Flink está usando tecnología Hadoop / K8S; el aprendizaje automático PAI también usa marcos de aprendizaje profundo de código abierto como TensorFlow.
Desde la perspectiva de la contribución , el Grupo ABB continúa contribuyendo a la comunidad de código abierto. Tomemos como ejemplo la comunidad tecnológica de Flink: solo el año pasado, Ayun contribuyó con millones de líneas de código a la comunidad de Apache Flink. Actualmente, el grupo tiene más de 1,000 proyectos de código abierto, que cubren muchos campos como datos, inteligencia artificial, nativos en la nube, bases de datos, middleware y hardware. Más de 700,000 desarrolladores de todo el mundo encienden GitHub Star para Alibaba. Millones de fanáticos participaron en la contribución del proyecto.
Adoptar la "convergencia" es la nueva dirección de la evolución del big data
Jia Yangqing dijo que las tres tendencias de desarrollo de la nube son principalmente la cloudificación de la infraestructura de TI, la interconexión de la tecnología nuclear y la digitalización e inteligencia de las aplicaciones. Aquí también es donde reside el valor central de la nube.
Después de que una empresa se convierte en una nube y una interconexión comercial en TI, sus aplicaciones deben cambiar de impulsadas por procesos a impulsadas por inteligencia de datos, realizando digitalización e inteligencia. La computación en la nube y la tecnología IaaS subyacente compiten por la madurez, la estabilidad y el precio de la infraestructura, mientras que la tecnología PaaS de nivel superior requiere capacidades de datos y capacidades inteligentes.
Anteriormente, los datos generales, incluidas las bases de datos y la IOT, todavía se encontraban en la forma más básica de usar datos, y era necesario integrar más datos y capacidades de inteligencia artificial.
Por lo tanto, adoptar la "convergencia" es una nueva dirección para la evolución de los grandes datos. La integración de grandes datos + la integración inteligente es la dirección inevitable del desarrollo de grandes datos, y la inteligencia artificial es el producto final del desarrollo de grandes servicios de datos. .
Solo con la IA se puede poner en juego el valor comercial real de los grandes datos. La razón por la que los datos grandes de Alibaba Cloud tienen una competencia central es que los datos grandes se combinan con capacidades de inteligencia artificial y son datos actualizados de manera inteligente. Por ejemplo, Flink + Alink, Flink no solo puede proporcionar capacidades de procesamiento por lotes, sino que también puede utilizar la biblioteca de algoritmos de aprendizaje automático Alink de código abierto para realizar la integración de Flink de grandes datos e inteligencia humana.
En el futuro, la economía social estará más integrada con Internet, y los negocios de empresas y organizaciones también se transformarán completamente en negocios de Internet. No es suficiente que una empresa solo tenga infraestructura de TI. Las aplicaciones empresariales también cambiarán de inteligencia impulsada por procesos a inteligencia impulsada por datos. La plataforma árabe de computación en la nube generará capacidades de tecnología de datos de pila completa y proporcionará la mejor tecnología de inteligencia artificial del mundo para Implementación conjunta Datos e inteligencia.
Este artículo es el contenido original de Alibaba Cloud y no se puede reproducir sin permiso.