Kakfaはじめに

カフカは何ですか

カフカは、もともと内部の内部インフラシステムをLinkedInのました。それは、あなたはカフカとサブスクリプションのストリーミングデータに公開し、処理のためにそれらを保存することができ、ワークフロープラットフォームと考えられています。しかし、我々は、ほとんどのようにActiveMQの、RabbitMQのとに似たメッセージングシステム、としてそれを使用することで、カフカを使用しています。しかし、これらの従来のメッセージングシステムとのカフカも多くの違いがあり、これらの違いは、メッセージングシステムから、それは違う作ります。

カフカが実行され、クラスタに分散システム（自由膨張をサポート）です。（私たちは、常に、分散メッセージキューと呼ばれます）
カフカは、データを格納するために使用することができ、データが格納されている時間の長さは、あなた自身で定義されている（フォールトトレラント永続的に保存されています）。さらにカフカに格納されたデータは、あなたが繰り返し読むことができることを条件とします。
ストリーミングは新しいレベルにデータ処理のレベルを向上させます。

伝統的なメッセージシステムは、メッセージのみを通過させるために使用します。
カフカは、（また、カフカの本来の意図の一つに設計された）のHadoopのリアルタイムバージョンとして見ることができます。定期的にデータファイルを大量に保存して処理するためのHadoopと、カフカと永続ストアとプロセス大規模なデータ・ストリーム。Hadoopのは、主に、データ分析に使用され、コアビジネスで使用されるため、その低遅延特性のカフカは、より適切な、ビジネス・イベントが発生したときに、カフカは、これらのイベントに適切な対応を行うことができます。彼らは、データを移動するのが得意なので、その間カフカはまた、比較およびETLすることができます。

サブスクリプションモデルのメッセージングシステム - カフカは、ニュースリリースのシステムに属しています。メッセージの送信者は、メッセージの受信者に直接メッセージを送信しませんが、メッセージが最初に（トピック）を分類し、メッセージシステムにメッセージを公開しています。選択したメッセージの受信者がメッセージタイプ（トピック）をサブスクライブし、その後、システムは、メッセージがサブスクライブされたメッセージから受信することができます。

講師プロフィール