El 16 de mayo, se llevó a cabo en Shanghái la sesión "Tecnología de procesamiento de datos de gestión de activos (modelo grande)" de la Conferencia internacional de empresarios e inversores en tecnología de gestión de activos de 2023. Con el tema "Tecnología de inteligencia digital de gestión de activos", esta conferencia invita a empresas, universidades, instituciones de inversión y otras partes a llevar a cabo intercambios y debates industriales, y compartir y crear oportunidades para la industria.
Kuker Data fue invitada a participar en la reunión como empresa líder en el almacén de datos nativo de la nube en China.El vicepresidente Wei Yi compartió nuevas ideas, nuevas tecnologías y nuevas prácticas en la combinación de big data y la industria de gestión de activos en la reunión.
Wei Yi dijo que el almacén de datos en la nube HashData es la solución de plataforma de análisis de datos más adecuada para las características de fuentes de datos ricas, alta proporción de datos no estructurados y amplia distribución de instituciones en la industria de gestión de activos. Basado en la arquitectura nativa de la nube, a través de la práctica madura de "separación de almacenamiento y computación" e "integración de lago y almacén", HashData puede eliminar "islas de datos", integrar fuentes de datos internas y externas, administrar y analizar de manera flexible datos no estructurados , y realizar el intercambio de datos globales y el acceso eficiente, proporcionando a las empresas de gestión de activos gestión de recursos de datos interregionales y entre departamentos, suministro flexible, capacidades de implementación multisitio y multiactiva, lo que permite a las empresas de gestión de activos liberar completamente el valor de los datos recursos y obtener oportunidades de desarrollo.
Oportunidades y desafíos de la gestión de datos en la industria financiera en la era del big data
El almacén de datos es una infraestructura importante de la industria financiera y juega un papel vital en el proceso de extracción de valor de los datos.
Wei Yi dijo que la industria financiera es intensiva en información y datos y tiene requisitos extremadamente estrictos para los almacenes de datos. En el pasado, la industria financiera generalmente usaba productos MPP que integraban depósito y cálculo para construir almacenes de datos. Sin embargo, con el avance de la tecnología financiera y el aumento en el volumen de datos, los desafíos como la alta concurrencia, los datos masivos y los picos ultraaltos se han presentado uno tras otro, lo que ha dado como resultado un aumento sustancial en la demanda de almacenamiento de recursos de datos, computación, y aplicaciones.
En los últimos años, la industria financiera se enfrenta a reformas digitales en línea, sin papel y basadas en escenas. Los escenarios de aplicación son complejos y la escala de datos está aumentando. El almacén de datos tradicional no puede hacer frente a la expansión elástica provocada por la marea empresarial y no puede satisfacer decenas de millones de consultas por día y millones de consultas complejas a nivel de tabla. Al mismo tiempo, la falta de implementación multi-AZ y soluciones de recuperación ante desastres entre sitios en los almacenes de datos tradicionales se ha convertido en una limitación en la transformación digital de las empresas financieras.
Frente a los desafíos que plantean los almacenes de datos tradicionales, muchas agencias de consultoría propusieron ideas de arquitectura diversificada e híbrida, y técnicamente introdujeron bases de datos MPP blandas puras y Hadoop. Sin embargo, a medida que las cargas del negocio financiero se vuelven cada vez más complejas y aumenta la demanda, los defectos de las plataformas diversificadas que no pueden lograr una alta concurrencia y el aislamiento de la carga se vuelven cada vez más prominentes, lo que dificulta cumplir con los requisitos de elasticidad, alta concurrencia y alta confiabilidad. Al mismo tiempo, todavía hay fluctuaciones en la experiencia comercial, integración de datos insuficiente, soporte de datos deficiente, gestión compleja de operación y mantenimiento y otras deficiencias.
Wei Yi señaló que en la era de big data + computación en la nube, la industria financiera necesita con urgencia una plataforma de almacenamiento de datos de próxima generación que pueda adaptarse a los cambios elásticos comerciales y brindar una buena experiencia de análisis, a fin de brindar soporte técnico para el innovador desarrollo de empresas financieras.
Wei Yi cree que una plataforma moderna de análisis de datos de empresas financieras debe tener capacidades de gestión de datos de múltiples formas, capacidades de análisis y computación diversificadas, y capacidades de escalabilidad elástica multidimensional y, al mismo tiempo, ser compatible con sistemas estructurados, semiestructurados, no estructurados y otras formas diferentes y tiempos diferentes Realice cálculos y análisis diversificados en datos permanentes, y realice escalado elástico de acuerdo con los cambios en los requisitos comerciales.
La tecnología de computación en la nube puede abordar bien las necesidades mencionadas anteriormente, y los principales proveedores de nubes públicas en el país y en el extranjero también han lanzado productos de bases de datos basados en arquitectura nativa de la nube. Al mismo tiempo, los proveedores de software independientes, como Snowflake y Databricks, también han lanzado productos que separan el almacenamiento y la informática, e integran lagos y almacenes.
Desde su nacimiento, el almacén de datos nativo de la nube se ha convertido rápidamente en la tendencia principal de la industria. Según los informes publicados por varias instituciones de investigación de mercado, la cuota de mercado de los almacenes de datos nativos de la nube superará a la de los almacenes de datos tradicionales. Gartner predice que el 75% de las bases de datos del mundo se ejecutarán en la nube en el futuro.
HashData ayuda a la industria financiera a mejorar la calidad y la eficiencia
En la actualidad, la economía digital se ha convertido en un motor importante para el desarrollo económico de mi país. Para las instituciones financieras, los datos también se han convertido en el recurso central a lo largo de la transformación digital de la industria financiera.
Con la transición de la informatización financiera a la digitalización, la capacidad de soporte de la base de datos determina en cierta medida el éxito o el fracaso de las instituciones financieras en la transformación digital.
En comparación con las bases de datos con arquitectura MPP tradicional, los almacenes de datos nativos de la nube han mejorado significativamente la eficiencia del análisis de datos empresariales.
Según una encuesta de cuatro empresas que utilizan Snowflake realizada por la consultora independiente Forresters, el valor acumulado creado en tres años superó los 21 millones de dólares estadounidenses y el ROI equivalente alcanzó el 612 %. Entre ellos, el costo de operación de datos se ahorró en 2,11 millones de dólares estadounidenses, y el costo de operación de la base de datos y la infraestructura se ahorró en 5,95 millones de dólares estadounidenses. Al mismo tiempo, Snowflake puede reducir drásticamente el tiempo de cómputo, aumentar las ganancias y brindar una mejor toma de decisiones basada en datos.
Como el primer proveedor de software independiente en China que se enfoca en la investigación y el desarrollo de almacenes de datos nativos de la nube, HashData ha estado practicando el concepto de "nativo de la nube" desde su establecimiento en 2016 y está comprometido con la construcción de una nube de clase mundial. -almacén de datos nativo.
El almacén de datos en la nube de HashData adopta el concepto de diseño de sistema de big data nativo de la nube líder en la industria representado por Snowflake, Databricks y Google BigQuery, y se basa en el almacenamiento de objetos y servicios abstractos. A través de la separación de metadatos, computación y almacenamiento, múltiples clústeres comparten y unificar La estructura de la capa de almacenamiento de datos maximiza las ventajas de la computación en la nube y utiliza las características de elasticidad y distribución de la plataforma en la nube para lograr una implementación rápida, escalado bajo demanda, entrega ininterrumpida, etc., lo que reduce en gran medida el umbral para que las empresas realicen análisis de big data.
Como un almacén de datos nativo de la nube de nivel empresarial, HashData proporciona alta simultaneidad, elasticidad, facilidad de uso, alta disponibilidad, alto rendimiento y escalabilidad inigualable por las soluciones tradicionales a través de diseños innovadores de arquitectura de capa de aplicación, almacenamiento, computación y servicio. características de aplicaciones nativas de la nube, débilmente acopladas, integración de lagos y almacenes, y casi "cero operación y mantenimiento", puede satisfacer las necesidades generales de los clientes con alta seguridad, alta confiabilidad, alta escalabilidad e inteligencia, y proporcionar instituciones financieras con funciones integrales, estables y confiables, un servicio de base de datos de nivel empresarial con gran escalabilidad y rendimiento superior.
A lo largo de los años, HashData ha seguido cultivando escenarios financieros centrales y ha acumulado una rica experiencia práctica. En la actualidad, HashData ha logrado una implementación comercial a gran escala en muchos grandes bancos estatales, bancos por acciones, importantes casas de bolsa y otras instituciones, y ha respaldado el grupo de clientes únicos más grande del mundo en la industria financiera.
Tomando Hengfeng Bank como ejemplo, al presentar el "sistema de perseverancia" creado por el almacén de datos en la nube de HashData, resolvió con éxito el desperdicio de recursos, la escalabilidad deficiente, el soporte concurrente pequeño, la incapacidad para expandirse y reducirse rápidamente, islas de datos, redundancia de datos, Operación y carga de trabajo de mantenimiento y otras cuestiones.
En comparación con el sistema anterior, el sistema Perseverance ha logrado mejoras de capacidad multifacéticas, con una capacidad de procesamiento central aumentada en 6,38 veces, la capacidad de procesamiento de transacciones comerciales con tarjetas por segundo aumentó en 23,8 veces y la capacidad de procesamiento de transacciones comerciales de pago en línea por segundo aumentó en 17,7 veces. Al mismo tiempo, el "Sistema de perseverancia" puede ahorrar alrededor del 30 % del costo del servidor al tiempo que satisface las necesidades de la industria para planificar nuevos almacenes de datos para respaldar los servicios informáticos de aplicaciones.
Wei Yi dijo que en el futuro, HashData continuará desarrollando capacidades digitales financieras integrales y construirá una "base digital" para la transformación financiera y el desarrollo innovador a través de soluciones detalladas y capacidades de servicio para escenarios comerciales empresariales, promoverá la implementación de soluciones digitales financieras. estrategias y ayudar a Shanghái a construir un Centro de Tecnología financiera y un Centro de Gestión de Activos Globales.