スパークは、複数の反復バッチ処理、折衷データウェアハウジング、ストリーム処理およびコンピューティングおよびその他のコンピューティングパラダイムからのインメモリコンピューティング、百倍以上のHadoopのパフォーマンスを、に基づいているカリフォルニア大学バークレーAMPLabクラスタ・コンピューティング・プラットフォームの大学から発信され、稀ですオールラウンダー。スパークは、このようなストリーム処理、描画技術、機械学習など、すべてのコアの問題を、解決するための統一されたテクノロジー・スタックを採用し、NoSQLのクエリ雲が直接その統一されたクラウド、ビッグデータフィールドを産むサウンド生態系、と、ビッグデータを計算します支配。技術の普及に伴いスパーク、専門家のための需要が高まっています。スパークの専門家はまた、将来的に求められている、あなたは簡単に百万給料を得ることができます。マスタースパークになるためにも、内部強度の練習から、一つずつ必要があります。一般的には、以下の段階を経る必要があります。
第1段階：熟練したマスターScalaの言語
図1は、スパークフレームワークは、洗練された優雅なScalaの言語の使用です。、あなたはスカラ座をマスターする必要があり、マスターになるためにスパーク、あなたはスパークのソースコードを読む必要があります。
2、あなたは複雑を書くためのScalaをマスターしなければならないので、ScalaのAPIの道になり、今スパークは、多言語のJava、Pythonと他のアプリケーションの開発することができますが、最速かつ最高の開発APIサポートはまだ、常にあるものの、スパークと高性能な分散アプリケーション。
図3は、具体的には、マスターScalaの形質は、関数型言語、一般的な、インバータ共変等を適用します。
[ビッグデータは、学習教材の収集方法を開発するために：技術交流グループ458345782を学ぶビッグデータに参加し、グループチャットをクリックし、私的な手紙には、管理者が自由に受け取ることができます
フェーズII：開発者向けAPIが利用できるスパーク堪能プラットフォーム自体
マスターRDDスパーク開発モデル、マスターおよび変換を使用して各種機能の動作のための1、。
図2に示すように、マスタースパーク依存性と狭い幅と系統依存性機構。
図3は、マスタ計算プロセスRDDは、ステージ部門として、スパークアプリケーションは、基本的なプロセスとワーカークラスタノードごと、等に作品を提出しました
フェーズIII：スパーク深度コア
この段階は、スパークソースフレームワークによって深い研究にスパークのコア部分であります：
1、ジョブ投入プロセスの把握スパークソースを介して、
図2に示すように、ソースコード管理タスクスケジューリングスパーククラスターを介し。
3、特に熟練DAGScheduler、TaskSchedulerとワーカーノード内の詳細作業の各段階。
四権：利用スパークに基づいてコアフレームワークを把握
クラウド・コンピューティング、リアルタイムのストリーム処理、描画技術、機械学習、のNoSQLクエリのビッグデータ時代のマスターとしてスパーク、私たちが使用している上、そのようなサメなどの時間枠の大半をスパークを使用するときに、重要な利点を持っています、ストリーミングスパークなど：
図1は、スパークストリーミングは非常に良好なリアルタイムストリーム処理フレームワークなどのDSTREAM、変換およびチェックポイントを習得することです。
2は、サメのスパークSQLに基づいて立ち上げ1.0.0バージョンをスパーク、オフライン統計分析をスパーク、効率的なオフラインの統計解析機能が大幅に改善している、把握することが重要です。
そのような機械学習とGraphXその原理と使用法を習得するのスパーク3、。
第五クラス：ビジネスレベルのスパークプロジェクトを行います
プロジェクトの建築設計、分析、開発、運用、保守を実現するための技術を使用し、すべての段階で完全に把握し、詳細を含むスパークのすべての側面、を介して実行するための完全な代表によるスパークプロジェクト、あなたが作ることができますあなたは冷静にスパークプロジェクトの大半に直面することができます。
第六クラス：スパークソリューションを提供しています
1、完全把握細部スパークフレームワーク源と
図2は、異なるビジネスシナリオのニーズに応じて異なるシナリオ下でのスパークソリューションが提供されます。
3、実際のニーズに応じて、スパークに基づいて二次開発フレームワーク、スパークは独自のフレームワークを構築します。
前述した6つの段階スパークは、学習ステップスルーすることができる第一および第二の段階でマスターとなり、後段は、好ましくは三人のエキスパート又は専門ガイダンス次のステップ、最終段階、基本によって行われますつまり、に完了するために、意図を理解するくらいの期間、「無ストロークトリックを勝ちます」。