Del 30 de octubre al 1 de noviembre de 2023, SoCC 2023 se llevará a cabo en Santa Cruz, California, EE. UU. Los resultados de la investigación del equipo de programación y organización de infraestructura de Bytedance fueron aceptados por S o CC 2023 y fueron invitados a presentar informes in situ.
El nombre completo de la conferencia SoCC es Simposio Anual ACM sobre Computación en la Nube. Es una de las principales conferencias en el campo de la computación en la nube . También es la única conferencia importante entre todas las conferencias ACM patrocinada tanto por SIGMOD como por SIGOPS. Representa el nivel actual de vanguardia de la computación en la nube en la academia, la industria y las comunidades de código abierto. La conferencia SoCC se estableció con el auge de la computación en la nube y se celebró por decimocuarta vez. La conferencia atrae cada año presentaciones de las principales instituciones de investigación del mundo y grandes empresas reconocidas, y tiene altos requisitos en cuanto a innovación, integridad y efectividad de los sistemas. Este año, la tasa de aceptación de artículos de conferencias es sólo del 30%.
Gödel: programación y gestión unificada de recursos a gran escala en ByteDance
Gödel es un sistema de programación unificado fuera de línea desarrollado de forma independiente por el equipo de programación y orquestación de infraestructura de ByteDance para la gestión de infraestructura nativa de la nube a gran escala.
Las líneas de negocio de ByteDance han experimentado una creciente demanda de recursos informáticos durante los últimos años. Con la continua expansión de los centros de datos y las demandas diferenciadas de recursos informáticos, el programador nativo de Kubernetes unifica varias cargas comerciales fuera de línea. El alojamiento y la operación de recursos unificados plantean una serie de desafíos .
En este contexto nació el sistema de programación Gödel, que en comparación con el programador nativo de Kubernetes, puede admitir varias programaciones fuera de línea y mixtas de cargas de trabajo de aprendizaje automático en un entorno de clúster, y tiene un alto rendimiento (hasta 10 veces) y un alto rendimiento. ya que la elasticidad (flujo de recursos en menos de un minuto) y la alta utilización de recursos (hasta 60%) satisfacen mejor los requisitos de implementación de los diversos negocios de Byte, como la implementación híbrida y la agrupación de recursos. Si bien cumple con los requisitos de SLA de varios tipos de cargas comerciales, también proporciona una plataforma común para la operación unificada de los recursos del clúster informático, mejorando así la utilización de recursos y la flexibilidad de tareas del Byte Data Center, logrando el propósito de reducir costos y aumentar la eficiencia. .
Los artículos y los informes de campo de Gödel se darán a conocer oficialmente en el SoCC 2023 a finales de octubre. Para entonces, el equipo de infraestructura de ByteDance también publicará el artículo de interpretación correspondiente del documento, así que estad atentos.