北京延京碧志情報コンサルティングが発表した調査報告書によると、2018年から2021年にかけて、世界のデータストレージ量は30ZBから約55ZBに増加し、年平均増加率は約27.8％となった。2022 年までに、総データ ストレージ容量はさらに 65ZB 以上に増加し、2021 年の同時期と比較して約 10ZB 増加、前年比 18.2% 増加する予定です。市場主体はデータにますます注目しており、データ アプリケーションはバッチ処理から大規模ストレージに徐々に移行しています。
あらゆる分野でのデジタル変革の深化に伴い、データ量は爆発的に増加しました。データ作成コストをどのように制御し、貴重なデータを発見し、データ ROI を向上させるかは、企業のデジタル変革の中期以降の段階で重要な課題となっています。
この記事では、企業データの多次元ガバナンスを通じてデータ資産の利用と価値を最大化する方法について説明します。
なぜデータガバナンスが必要なのでしょうか?
2023 年のキーワードは「コスト削減と効率向上」であることは間違いありません。業界大手も中小企業も継続的なコスト削減と効率向上を通じて競争上の優位性を維持しようとしています。データ ガバナンスはその重要な部分です。
生産コストを管理する
データ ウェアハウスの構築プロセスでは、企業はデータの生成と配信に関心を持ち、データ ガバナンスに十分な注意を払っていないことがよくあります。リソースが不足し、コストが上昇している場合、コスト最適化の方向性を明確に決定することはできません。大量のサイレント データ ストレージを処理する方法や、冗長データ コンピューティング リソースを割り当てる方法について、的を絞った対策はありません。
データ ガバナンスの目的は、企業のデータ コストの増加やデータ品質の低下につながる悪質な要因を迅速に特定して解決し、企業がデータ コストを削減し、データの品質と信頼性を向上させ、ビジネス上の意思決定とデータ品質をより適切にサポートできるようにすることです。持続可能な発展。
データの価値を高める
データ資産は、ユーザーによるデータ標準の確立、データモデルの標準化、企業のデータ品質検証の支援などに役立ちますが、管理の推進が難しい、下位レベルでの実行が難しいなどの課題もあります。価値データを効果的に特定し、価値データを保持し、価値データの実装を促進する方法は、企業が考慮する必要があるものです。
データ ガバナンスは、企業が貴重なデータを包括的に理解して習得し、データ標準の実装を促進し、データの正確性と一貫性を確保し、データ品質を向上させるのに役立ちます。
データガバナンスをどのように実装するか?
国際データ管理協会は、著書「DAMA データ管理ナレッジ システム ガイド」の中で、データ ガバナンスをデータ管理の 10 の知識領域の中心として捉え、知識領域のバランスと一貫性を担当し、さまざまなデータに対する全体的なガイダンス戦略を提供します。管理活動。
今日ではデータ ガバナンスの重要性は自明のことですが、ほとんどの企業は依然としてデータ ガバナンスについて「データ ガバナンスは言うは易く行うは難し」という一般的なコンセンサスを持っています。
データガバナンスはどのように管理すべきでしょうか? どこで治療するのですか？
データガバナンスルールの策定
データ ガバナンス ルールは、コンピューティング、ストレージ、品質、仕様、価値の 5 つの側面から構成でき、さまざまな側面でガバナンス ルールを策定することで、企業のストレージ コストの最適化、リソースの無駄の回避、データ品質の向上、標準と仕様の促進、およびデータ価値を実現します。
● 計算された寸法
各プロジェクトのタスクに基づいて、超長時間タスクや異常事態を判断し、さまざまなルールに対応した推奨処理方法を定義して、リソースの無駄を回避します。
●収納寸法
各プロジェクトのデータテーブルに基づいて、さまざまなルールに対応する推奨処理方法が定義され、ストレージコストを最適化します。
● 品質の次元
各プロジェクトのタスクに基づいて、データ品質を向上させるために、さまざまなルールに対応する推奨処理方法が定義されています。
●規格寸法
各プロジェクトのデータシートに基づいて、さまざまなルールに対応した推奨処理方法を定義し、規格・仕様の導入を推進します。
● 値の次元
各プロジェクトのデータテーブルに基づいて、企業がデータの使用状況を理解し、データの価値を高めるために、さまざまなルールに対応する推奨処理方法が定義されています。
データ ガバナンス ワークベンチを構築する
データ ガバナンス実践の実装プロセスでは、実行のために特定のプラットフォームに依存する必要があります。テクノロジーが発展し続けるにつれて、これらのプラットフォームはよりインテリジェントになってきています。
Kangaroo Cloud Data Governance Center は、データ ガバナンス ワークベンチの構築をサポートします。ワークベンチは、ガバナンス タスクを開始し、処理すべき問題、処理方法の提案、責任者、進捗状況などを表示して、クローズドループ データ ガバナンスを実現します。処理プロセスの問題を解決し、データ ガバナンス プロセスを改善し、ライフサイクル全体を管理します。
● 個人用ワークベンチを作成する
個人用ワークベンチには、各ユーザーの保留中の問題のリストが表示されます。各ユーザーは、現在保留中の問題の総数、処理された問題の数、延期された問題の数、ホワイトリストに追加された問題の数などを含む、自分に割り当てられている問題処理リストを表示できます。
問題が処理された後、システムは問題を自動的に再検証します。検証後、問題は「処理」されます。問題がある場合は、ガバナンス問題処理の閉ループ管理を完了するために再度処理する必要があります。 。
● ガバナンスタスクの構成
ガバナンスタスク管理は、プロジェクト次元からのガバナンスタスク管理を支援しますガバナンスタスクのスケジューリング周期やガバナンス通知情報を設定可能 総発生課題数、処理課題数、割り当て課題数を設定可能ガバナンス プロジェクトごとに表示されます。
ガバナンス項目を処理するときに、未割り当ての問題のリストを表示できます。プロセッサは、さまざまなディメンションおよび問題カテゴリに従ってバッチで割り当てることができます。問題を割り当てるときに、問題の処理時間制限を設定できます（たとえば、 3日以内に処理 記録が完了していない場合（延期発行数）、通知方法等
● ガバナンス結果の全体像
データ ガバナンス結果の概要は、パノラマ ビュー、プロジェクト ビュー、個人ビューなどの複数のビュー ディメンションでのガバナンスの概要の概要表示をサポートします。表示内容には、プロジェクトの数、タスクの数、データ テーブルの数、管理項目数、資産健全性スコア、スコア変化傾向、ガバナンス項目の変化傾向などを掲載し、企業がガバナンスの概要を十分に理解できるようにします。
データガバナンスの価値
データ ガバナンスを実装することにより、企業はデータの収集、統合、クリーニング、処理プロセスを効果的に管理および制御し、高品質のデータを継続的に生成できるようになります。これらの厳選されたデータは、企業により多くの情報に基づいた意思決定の基盤を提供し、これらすべての取り組みは企業の事業開発とイノベーション管理をさらに促進します。
Kangaroo Cloud Data Governance Center は、プラットフォームの使用中にデータストレージ、タスク計算、コード開発、データ品質、データ仕様、データ値などの側面に存在する問題を継続的に監視し、資産健全性ポイントの定量的評価を通じて、問題を分析します。全体の状況、プロジェクト、個人の視点から、全体の状況、プロジェクト、個人の視点からガバナンスの成果を多角的に提示します。
企業のデータ仕様の改善、データ品質の最適化、リソースの節約、コストの削減、効率の向上を促進し、企業が効率的にガバナンス目標を達成できるように支援し、データ資産の価値を最大化します。
これまでの経験を一冊にまとめ、140ページにわたる詳細な情報と典型的な成功事例15件を掲載した「データガバナンス業界実践白書」として、データガバナンスを方法論から実践まで包括的に解読し、データガバナンスの新たなパラダイムを切り開きます。データガバナンス。豊富なコンテンツが無料でダウンロードできるので、データガバナンスに興味のある学生は必読！
「データ ガバナンス業界実践ホワイト ペーパー」ダウンロード アドレス: https://www.dtstack.com/resources/1001?src=szsm
「Dtstack 製品ホワイトペーパー」: https://www.dtstack.com/resources/1004?src=szsm
Kangaroo Cloud のビッグデータ製品、業界ソリューション、顧客事例について詳しく知りたい、または相談したい場合は、Kangaroo Cloud の公式 Web サイトにアクセスしてください: https://www.dtstack.com/?src=szkyzg
同時に、ビッグデータのオープンソース プロジェクトに興味のある学生は、最新のオープンソース テクノロジー情報を交換するために「Kangaroo Cloud Open Source Framework DingTalk Technology qun」に参加することを歓迎します。qun 番号: 30537511、プロジェクト アドレス: https: // github.com/DTStack
Alibaba Cloudが深刻な障害に見舞われ、全製品に影響（復旧済み） ロシアのオペレーティングシステム「Aurora OS 5.0」、新UIが Tumblrで公開 多くのインターネット企業がHongmengプログラマーを緊急採用 .NET 8が正式にGA、最新版LTS版 UNIX時間 17億時代に突入しようとしている（すでに突入） XiaomiはXiaomi Velaが完全にオープンソースであり、基盤となるカーネルは NuttX Linux上の.NET 8であることを公式に発表しました。独立したサイズは50％削減されます。FFmpeg 6.1」ヘビサイド」リリース Microsoft、新たな「Windowsアプリ」を発売