商シリコンバレービッグデータプロジェクト「オンライン教育のためのオフラインデータウェアハウス」メモ005

動画アドレス: Shang シリコンバレービッグデータプロジェクト「オンライン教育のためのオフラインデータウェアハウス」_bilibili_bilibili

目次

第 10 章 データ ウェアハウス開発の DWS 層

P071

P072

P073

P074

P075

P076

P077

P078

P079

P080

P081

P082

P083

P084

P085

P086


第 10 章 データ ウェアハウス開発の DWS 層

P071

デザインポイント:

(1) DWS層の設計参照インデックス体系

(2) DWS 層のデータ保存形式は orc カラムストレージ + Snappy 圧縮です。

(3) DWS層テーブル名の命名仕様は、dws_data domain_statistical granularity_business process_statistical period (1d/nd/td)となります。

注: 1d は最後の日を示し、nd は過去 n 日間を示し、td は現在までの履歴を示します。

P072

10.1.1 過去 1 日のトランザクション ドメイン ユーザー粒度ユーザー購入概要テーブル

10.1.2 過去 1 日のトランザクション ドメイン ユーザー粒度ユーザー支払い概要テーブル

P073

10.1.3 過去 1 日以内に行われたユーザー注文のトランザクション ドメイン セッション粒度の概要テーブル

P074

10.1.4 過去1日の試験領域試験紙粒度試験の集計表

P075

10.1.5 過去 1 日の試験分野の問題のスコアセグメント粒度の概要表

P076

10.1.6 過去 1 日間の試験ドメインの質問粒度試験の概要表

P077

10.1.7 過去 1 日のトラフィック ドメイン セッション粒度ページの閲覧概要テーブル

P078

10.1.8 データロードスクリプト

P079

10.2.1 過去 n 日間のトランザクション ドメイン ユーザー粒度のユーザー購入概要テーブル

10.2.2 過去 n 日間のトランザクション ドメイン ユーザー粒度のユーザー支払い概要テーブル

P080

10.2.3 過去 n 日間の試験ドメイン試験用紙粒度試験の概要表

P081

10.2.4 過去 n 日間の試験ドメインの試験用紙スコアセグメント粒度の要約表

10.2.5 過去 n 日間の試験ドメインの質問粒度試験の概要表

P082

10.2.6 データロードスクリプト

P083

10.3.1 これまでのトランザクションドメインユーザーの詳細な注文履歴の概要表

P084

10.3.2 現在までのトランザクションドメインユーザー粒度ユーザー支払履歴要約表

P085

10.3.3 現在までのユーザードメインユーザー粒度ユーザーログイン履歴集計表

P086

10.3.4 データロードスクリプト

おすすめ

転載: blog.csdn.net/weixin_44949135/article/details/132482237