架构师之路:数据中台关键数据治理

作者:禅与计算机程序设计艺术

1.简介

数据中台(Data Intelligence)作为2020年互联网企业必备技能之一,其重要性无需多言。随着越来越多的企业将数据视作至关重要的基础业务,传统的数据处理方法已无法满足时代要求,如何实现数据驱动、智能化,以及如何对关键数据进行有效治理,成为了各公司面临的共同难题。因此,我们必须秉持科学发展观,学习先进技术,切实提升数据中台的整体能力,培养出一支能够兼顾架构、开发、测试等方面的高级数据架构师。本文旨在通过对数据中台核心技术和原理的解析,结合实际案例,帮助读者了解数据中台的定义及其作用,并对数据中台的关键治理方式——数据质量建设和数据模型设计有全面的认识。

2.知识背景

2.1 数据中台概念

数据中台是一种基于云计算、大数据分析、机器学习、IoT技术、云平台等新兴技术的新型组织形态,它是一个将海量数据集成、清洗、分析、决策、呈现到用户终端的综合性平台。它将企业内多个系统中的各种数据集合起来,形成中心管理平台,实现了跨部门、跨系统、跨业务场景的数据共享和协同。它既是一套数据分析系统的集合,也是一组数据治理工具的集合。它解决的是海量数据的处理、分析、挖掘问题,极大地促进了企业的效率和竞争力。

2.1.1 数据中台发展历程

数据中台从最早的数字孪生、智能数据采集、数据仓库的模式演变而来,逐步形成独立部署于各个数据中心的海量数据集市。随后,数据中台的角色发生了变化。作为数据治理和智能应用的“纽带”角色,数据中台的目标是把各种数据源汇聚到一起,形成统一的数据库,支持业务快速响应、有效决策。2017年,英国《

猜你喜欢

转载自blog.csdn.net/universsky2015/article/details/132013986