数据仓库学习笔记 --- 数据仓库入门知识（痛点、模型、规范、系统建设）

主要内容：

• 数据仓库痛点

• • 痛点一：临时获取数据需求占用数据仓库大部分时间（自助获取数据工具 + OLAP系统）；

  • 痛点二：数仓规范和流程不一致，跨部门合作困难（建模规范和开发规范）；

  • 痛点三：指标口径不一致导致数据数据可信度下降（指标字典）；

  • 痛点四：烟囱式开发形成的数据孤岛与重复计算（建模规范和开发规范）；

  • 痛点五：数据膨胀导致计算资源紧张，出数时间得不到保障（建模规范和开发规范、数据产品和服务化）；

  • 痛点六：异常排查时间和修复时间长（元数据与数据质量管理）；

  • 痛点七：数据安全和数据共享矛盾不可调和（数据分级和权限管理）；

  • 痛点八：产出形式单一（数据产品和服务化）；

  • 痛点九：业务需求响应不及时（自助取数+OLAP系统、数据产品和服务化）；

• 数据仓库模型

• ODS 数据接入层（Operational Data Store） 数据同步、基本保持与源数据格式一致，不做过多校验