著者: 禅とコンピュータープログラミングの芸術
1 はじめに
1. 背景の紹介
モバイル インターネット アプリケーションの急速な発展は、社会的および経済的なグローバル化の傾向となっています。携帯電話やタブレットなどのモバイル端末デバイスを使用する人が増えるにつれて、データの生成と収集が特に重要になっています。同時に、モバイルインターネットのデータ量も爆発的な増加を見せています。市場調査の統計によると、これまでにモバイル インターネット アプリケーションによって生成されるデータ量は 12 億件に達し、1 日の平均データ量は 7.75GB 近くに達し、ユーザー トラフィックの大部分を占めています。データは徐々に増加し、推定の程度は計り知れないレベルに達しています。モバイル データ プラットフォームの構築は、明らかに重要かつ困難な作業です。モバイル データ プラットフォームを構築するには、まずデータの収集、保存、管理、分析という中核的な問題を解決する必要があります。次に、データのセキュリティ、正確性、有効性を確保するためにデータ開発仕様を策定する必要があります。最後に、企業がユーザーのニーズをより深く理解し、リアルタイムのデータの追跡、予測、監視を戦略的に使用することで製品の品質とサービス レベルを向上できるよう、完全な業務運営システムを確立する必要があります。したがって、強力で堅牢なデータセンター プラットフォームを構築することが、モバイル データ プラットフォームを構築して成功するための鍵となっています。
2. 基本的な概念と用語の説明
データ収集
データ収集とは、さまざまなデータ ソースからモバイル アプリケーション クライアントにデータを収集、クリーニング、標準化、送信および適用するプロセスを指します。一般に、データ収集ワークフローには次の手順が含まれます。
- データ ソースの選択 - モバイル アプリケーションは、さまざまなハードウェア情報、ネットワーク データ、ログなどのさまざまなデータをさまざまなチャネルから取得します。
- データ クリーニング - さまざまなデータ ソースによって提供されるデータの種類、構造、または形式には一貫性がないため、データの一貫性と正確性を確保するために、さまざまなデータ ソースからのデータをクリーニングする必要があります。
- データの標準化 - データの交換、分析、処理を容易にするために、多くの場合、統一データ形式、タイムスタンプ形式などのデータ収集プロセスを標準化する必要があります。
- データ転送 - 異なるデータ ソース間のデータをターゲット サーバーに転送する必要があります