来源：大数据技术标准推进委员会 数据观
本文约5000字，建议阅读10分钟日前，《2023大数据十大关键词》在2023大数据产业发展大会主论坛上正式发布。
我が国のビッグデータ産業政策がますます完璧になり、産業基盤がますます強化され、データ要素市場の構築が深化し続けるにつれて、ビッグデータ産業は再び巨大な発展の余地をもたらしています。数日前、2023年ビッグデータ産業発展カンファレンスのメインフォーラムで「2023年ビッグデータトップ10キーワード」が正式に発表された。
ビッグデータの10のキーワードは、情報通信研究機構による長期にわたる業界の調査と観察に基づいており、業界の第一線の専門家の意見を十分に結集し、ビッグデータのホットな方向性を示すことを目的としています。ビッグデータ産業の現在の発展。
コンピューター言語から生産要素に至るデータの全ライフサイクルには、データリソース化、データガバナンス、データ資産化、データ開発と応用、データ流通、データ要素市場構築、データセキュリティという 7 つのリンクが含まれます。今年のトップ 10 キーワードのうち 4 つはデータ開発とアプリケーションに、2 つはデータ要素市場に、2 つはデータ セキュリティに含まれており、今年の開発の焦点がデータ ビジネスの強化と社内外の統合にあることを反映しています。 、セキュリティ基盤の強化を続けます。
キーワード 1
湖と倉庫の統合により、データプラットフォームの開発は統合と統合の新たな段階に入りました
モバイルインターネットの急速な発展に伴い、複数のデータタイプの保存やマルチシナリオ分析などのビジネス要件を満たすために、一部の企業はデータプラットフォーム上にデータレイクとデータウェアハウスを展開し、ETLを介してデータを交換するビジネスアーキテクチャを採用しています。 。このレイク + ウェアハウスのハイブリッド アーキテクチャには、ストレージ コストが高い、適時性が低い、整合性の問題が発生しやすい、開発とメンテナンスが高いという 4 つの大きな問題があります。
上記の問題を解決するために、レイクとウェアハウスの統合テクノロジーが登場しました。レイクとウェアハウスの統合により、データ レイクとデータ ウェアハウスの利点が統合され、統合されたオープンなデータ処理プラットフォームが形成されます。最下層は統合されたデータ処理プラットフォームをサポートします。複数のデータ型のストレージ、データ 1 の実現。一連のタスクはデータ レイクとデータ ウェアハウスの間でシームレスにスケジュールおよび管理され、上位層は統一インターフェイスを通じてアクセス クエリと分析を実行します。レイクとウェアハウスの統合により、データ ウェアハウスとデータ レイクの間の障壁が取り払われ、データ レイクの低コストのデータ ストレージ アーキテクチャ上に構築され、データ ウェアハウスのデータ処理および管理機能が備わります。さまざまな業界でデジタルトランスフォーメーションが継続的に進む中、統合レイクウェアハウスプラットフォームに対する市場の需要は拡大し続けており、Amazon、Alibaba Cloud、Tencent Cloudなどのメーカーが統合レイクウェアハウス製品を発売し、業界で広く使用されています。インターネット、通信、金融など。
キーワード2
データの活用、産学研究の促進、キーリンクの突破が期待される
データ要素市場の育成と発展を加速するという最終目標に向けて、産学研究のあらゆる部門がデータ資産化の研究と実践を実施してきました。
政策面では、中国共産党中央委員会と国務院は2022年12月に「20のデータ対策」を発表し、「データ要素の流通とトランザクションサービスエコロジーを促進する。データベンダーのグループを育成する」ことを明確に提案した。 「資産コンプライアンス、標準化、および付加価値サービスを提供し、データ資産入力の新しいモデルを模索します。」
過去 3 年間で、データ資産化の実践が本格化しました。データ所有権の観点からは、データ交換局や知的財産庁に代表される機関がデータ資産登録の要件を提示し、データ資産の標準化された取引の基礎を築きました。データ評価に関しては、データ資産評価の目的や対象が徐々に明確になりつつあり、企業の焦点はデータ応用価値の観点からデータ資本の観点に移ってきており、例えば中国光大銀行は与信を完了している。以前の調査に基づいて、貴陽移動金融発展有限公司に 1,000 万ドルを寄付しました。これはデータ評価の実践における大きな進歩です。データ入力に関しては、財務省主計局が昨年「企業データ資源に係る会計処理に関する暫定規則（意見募集案）」を公布し、データ資源に関連する取引や事項は以下の基準に従って処理することを提案した。データリソースを保持する目的とその形成方法、会計上の確認、測定、報告は、表に含めるべきデータ資産の考え方を提供します。現場のデータ取引に関しては、北京、上海、貴陽、深センに代表されるデータ交換所が取引プラットフォームを構築し、取引エコシステムを構築し、取引市場の健全かつ秩序ある発展を促進している。
情報通信技術研究所のユンダ研究所も、データ資産化に関する取り組みに関連した取り決めを行っています。1 つ目は、ビッグデータ局、通信、金融機関およびその他の機関と協力してデータ評価基準を発行すること、2 つ目は、データ交換局と協力してデータ製品のデータ品質評価を実行すること、3 つ目は、データ製品の成熟度に関する基準を策定することです。データ資産操作機能。
キーワード3
標準主導のDataOps、国内DataOpsは大規模導入の段階に入った
データ R&D と運用の統合 (DataOps) は、データ開発の新しいパラダイムです。俊敏性やリーンなどの概念をデータ開発プロセスに統合します。データ関連の人員、ツール、プロセスの再編成を通じて、コラボレーションの障壁を打ち破り、データ開発プロセスを構築します。統合開発、ガバナンス、統合された自動データ パイプラインにより、データ製品の配信効率と品質が継続的に向上し、高品質のデジタル開発が実現します。
産業上の実践と理論的研究の発展に伴い、DataOps は漠然とした概念段階から実用的な段階へと徐々に進化してきました。2022 年、中国情報通信技術院と多くの大手通信、金融、インターネット企業が共同で DataOps 標準ワーキング グループを設立し、7 つの DataOps 機能ドメインを定義した「DataOps 機能フレームワーク モデル」をリリースしました。 2022年末、ワーキンググループはR&D管理能力領域の改良基準を発表した。2023 年前半に、ワーキング グループは「DataOps 実践ガイド (1.0)」をリリースし、ベスト プラクティスから DataOps の理論的フレームワークを抽象化し、業界が DataOps を実践するための理論的参考資料を提供しました。中国情報通信技術院はこれを発表しました。 DataOps R&D および管理能力ドメイン標準に基づく評価。標準の導入により、ICBC、ABC、Zhejiang Mobile、Jiangsu Mobile およびその他の大手企業のデータ R&D および管理の能力が検証され、データオプスの確立を促進します。これらの機関は評価を通じて自らの能力を向上させます。同時に「DataOpsコミュニティ」も立ち上げ、現在130機関が参加しており、調査によると、これらの機関はすでにDataOps関連の実践を行っており、国内のDataOpsは大規模導入の段階に入っている。
キーワード4
データサービスとサービスシステムの構築がデータセンターの開発計画の焦点となっている
データセンターの重要な機能は、データベースのセルフサービス分析、モデル管理、インターフェイス呼び出し、インデックスおよびラベル管理などの多様な機能サポートをビジネスパーティに提供することです。データ サービスは、データ センターが機能を外部にエクスポートするための出口です。データサービスシステムを構築すると、ビジネス側が必要なデータコンテンツを検索・取得しやすくなり、データセンターの価値をより発揮できるようになります。すべての関係者によるデータセンターの基礎的な能力構築が徐々に成熟するにつれて、データ サービスがデータセンター構築の主要な方向性になりました。Kuaishou、中国建設銀行、チャイナモバイルなど、さまざまな分野の大手企業のデータミドルエンドチームはいずれも、データサービス機能の構築を2023年の業務の焦点とみなしている。データサービス機能の構築には、主に次の 3 つの方向性があります: 1 つは、さまざまなビジネス ニーズを満たすさまざまなデータ サービス手法を構築することであり、もう 1 つは、散在するデータ サービス プラットフォームを統合し、統一されたデータ サービス ユーザー インターフェイスを構築し、サービスポータルの統合 3つ目は、データサービスのライフサイクル全体の運用管理を改善し、サービス運用の標準化を実現することです。多様なデータ サービス、統合されたデータ サービス ポータル、および標準化されたデータ サービス オペレーションを提供することで、企業はより多くのユーザーがデータ センターのさまざまな機能を効率的に使用できるようになり、データ センターの価値を最大限に発揮できるようになります。
2022年4月から現在まで、情報通信研究機構が主導して業界の専門家や大手企業と連携して「データセンター能力成熟度モデル」の一連の規格を共同で取りまとめ、データサービス機能が組み込まれてきました。 6 つのデータセンター機能ドメインの 1 つとして標準システムに組み込まれます。2023 年上半期に、浙江移動業銀行と中国工商銀行は、この基準に基づいたデータ サービス機能評価の最初のバッチを完了しました。
キーワード5
インテリジェントな強化された分析、データ分析のインテリジェントなアップグレード
インテリジェントに強化されたデータ分析ツールは、機械学習や自然言語処理などのインテリジェント テクノロジーを使用して、データ分析プロセスにおけるデータの準備、洞察の発見、結果出力の共有の 3 つの側面を改善し、それによってデータ分析の自動化を向上させます。この概念は 2017 年に Gartner によって提案されましたが、当時の AI 技術のレベルに限界があり、この分野は画期的な発展には至っていません。2023 年の AIGC テクノロジーの人気に伴い、データ分析分野での応用もあらゆる関係者の注目を集めています。Microsoft PowerBI、Baidu SugarBI、Guanyuan BI などのチームは、インテリジェンスが強化されたデータ分析の探索と展開を加速し、BI+ ラージ モデルの概念に基づいてインテリジェンスが強化された分析ツールを立ち上げました。インテリジェントに強化されたデータ分析ツールにより、ユーザーは会話形式でツールを操作できます。このツールは、セマンティック分析を通じて関連するデータ ソースを呼び出し、対応する分析アルゴリズムとデータ視覚化プレゼンテーション方法を適応させ、統計グラフとテキストの洞察と分析レポートを自動的に生成します。インテリジェントに強化されたデータ分析ツールにより、データ分析作業をチャットに似た形式で簡単に完了できるようになり、技術的なバックグラウンドのないユーザーでも、より低いしきい値とより高い効率で一定の詳細な分析を実現でき、データをよりフロントで活用できるようになります。ライン担当者は、データ分析作業の包括的な開発を大幅に推進します。
キーワード6
データ倫理、国家デジタル経済ガバナンス システムの重要な部分
ビッグデータや人工知能などの新技術の活発な開発は、技術革新と経済発展を促進しました。しかし、ビッグデータ活用によるマイナス面も無視できず、ビッグデータの抹殺、プライバシー情報の漏洩、データ悪用、悪質なコンテンツの推奨などの現象が次々と発生しており、伝統的な生活を基盤とした人間の倫理的価値観が問われています。世界もまた大きな課題に直面しています。そのため、我が国は2021年以降、データセキュリティ、個人情報保護、技術倫理に関する多くの法令を相次いで公布し、データ倫理ガバナンスの枠組みを構築し、人類のための技術開発を促進し続けています。米国は、データ倫理システムの構築を加速し始めており、現在、理論的枠組み、実践的なガイダンス、関連法の 3 つのレベルをカバーしています。細分化された分野におけるデータ倫理問題をより適切に管理するために、米国商務省が2023年2月に発行した「商業データ倫理フレームワーク」は、ビジネス分野におけるそれを補足するものです。健全なデータ倫理ガバナンスシステムの確立は、デジタル経済の健全な発展を確保するために必要な条件であり、政府、企業、社会のあらゆる側面の共同努力が必要であることがわかります。
キーワード7
データ要素の値の解放の問題を解決するデータ基盤システム
昨年末、中国共産党中央委員会と国務院は「データ要素の役割をよりよく果たすためのデータ基本システムの構築に関する意見」（「データ二十ヶ条」とも呼ばれる）を発表した。 。これは我が国初の国家レベルの特別政策文書であり、生産要素の高さからデータ要素の価値放出を展開するものであり、非常に画期的な意味を持つ。「データ二十か条」はその概要を示しており、まず、データ基盤システムの構築とデータ要素の役割の発揮、すなわち、国家データのセキュリティを維持し、個人情報と商業秘密を保護し、データ要素の価値を十分に認識し、すべての人々によるデジタル経済発展の配当の共有を促進するために、コンプライアンスを遵守した効率的な流通と使用を行い、実体経済に力を与えます。さらに、「データ二十ヶ条」では、データの特性に適応し、発展の法則に適合し、イノベーションのリーダーシップを発揮する基本的なデータシステム体系を具体的に提案した。権利と利益を保護し、規制に従って使用されるデータ財産権システム、オンサイトとオフサイトの両方を組み合わせたコンプライアンスに準拠した効率的なデータ要素の流通および取引システム、効率性とデータ要素の収益分配システム、これら 4 つの主要なシステムは、基本データ システムの「4 つの梁と 8 つの柱」を構成し、データ要素の価値解放をさらに促進する方向性を示しています。
キーワード8
公的データの認可された運用が全国で広く実施され、大規模化と標準化が進む
2022 年 12 月に、「データ二十条」が発表され、公共データの認可認可メカニズムの確立が提案されました。これは、公共データの開発と利用における物議を醸す「所有権」問題に合理的な解決策を提供し、公共データの開発と利用の基礎を提供しました。公的データの認可された運用により、新たな機会がもたらされました。
初期段階では、北京、海南、貴州、成都などの地域がさまざまな革新的な実践の探求を積極的に実施し、基本的に公的データの認可された運用モードを形成しました。公共データ管理機関は、リソースを統合し、統一的に開発と利用を促進し、運営機関または処理当事者にデータを処理する権限を与え、製品またはサービスの形で市場に参入し、申請当事者に提供します。
2023 年以降、「データ二十条」の指導のもと、さまざまな地方自治体が対象を絞った対策を積極的に実施しています。まず、杭州、済南、青島、武漢、煙台、鄭州などが相次いで公的データ認可運用管理措置を発令し、ワーキングメカニズムの確立を促進している。第二に、河南省、福建省、湖北省、湖南省、蘇州などが相次いで市場主体として現地データグループ会社を設立し、公的データとソーシャルデータの統合的な開発と活用を促進するための認可された業務を実施している。
人的資源社会保障省、民間航空局、最高法などの業界当局も、業界ベースの調査を実施し、電子社会保障カード、航空旅行、司法ビッグデータ サービスなどの製品やサービスを形成しています。ネットワークを構築し、公開データの価値を公開する新たな機会を提供します。
しかし、これまでのところ、公共データはまだ統一された認可された運用メカニズムを形成しておらず、実務上はリスクと課題が存在しており、より完全な標準および規範的なシステムを模索し、運用主体の能力の観点から標準化された開発を推進する必要がある。オペレーティングプラットフォーム技術とその実績。
キーワード9
データ セキュリティ リスク評価、データ セキュリティ ガバナンスの重要な出発点
データ要素の市場指向の開発の継続的な進化により、データ セキュリティ ベースの機能に対する要件が継続的に増加しています。データセキュリティリスク評価は、データセキュリティガバナンス能力を向上させるための重要なリンクである一方で、さまざまな国家政策によって推進され注目を集めており、ビジネスデジタル化の健全な発展において必須の課題となっています。したがって、データ セキュリティ リスク評価はデータ セキュリティ ガバナンスの重要な出発点となりつつあり、国も標準化作業や実践的なガイドラインにおいて対応する検討を行っています。以前、CAICT は、企業がデータ セキュリティ リスクを防止できるように、システム管理セキュリティ、システム データ セキュリティ、システム アプリケーション セキュリティに基づいたデータ セキュリティ リスク評価フレームワークも提案しました。
キーワード10
データのアウトバウンド、理論から実践への 3 つのパス
2023年6月1日の「個人情報の海外輸出に関する標準契約措置」の正式施行に伴い、データ輸出の話題が再び白熱した議論を巻き起こしている。中国サイバースペース局が「データ輸出セキュリティ評価宣言に関するガイドライン」の初版を発行して以来、さまざまな省や市が解釈活動を実施したり、現地の宣言ガイドラインを発行したりして、実践的な道を模索するなど、積極的にフォローアップして対応している。輸出審査業務の円滑な推進のため。同時に、個人情報保護認証や個人情報の輸出に関する標準契約措置も注目を集めています。3 つのアウトバウンド ルートにはそれぞれ適用可能なシナリオがあり、相互に補完し、データのアウトバウンド作業の実装に関するガイダンスを提供します。
最後に、2023 年のビッグデータのトップ 10 のキーワードは、政策、コンセプト、セキュリティ、テクノロジーなどのデータ要素の価値放出のあらゆる側面を網羅しており、我が国のビッグデータ産業が政策指針を形成していることを示していると結論付けることができます。 、コンセプトファースト、技術サポート、セキュリティを備え、健全な開発パターンをエスコートします。
編集者：ウェン・ジン
