Apacheのスパークデルタ湖のトランザクションログの深い理解

Apacheのスパークデルタ湖のトランザクションログの深い理解

それはようにACIDトランザクション、拡張可能なメタデータの取り扱い、タイムトラベル(時間旅行)とを含むユニバーサルモジュールの最も重要な機能の多くを介して実行されるため、トランザクション・ログは、デルタ湖理解するための鍵です。この記事では、ファイルレベルであるものをトランザクションログ(トランザクションログ)を議論する、それがどのように動作するかで、どのように読み込んで、複数の同時のためのエレガントなソリューションを提供するという問題を書き込みます。

どのようなトランザクションログ(トランザクションログ)です

(もデルタログとして知られている)デルタ湖のトランザクションログが毎回デルタ湖秩序、レコード上のトランザクションテーブルで実行されます。以下の具体的な形態:

[email protected]:/tmp/delta-table/_delta_log|
⇒  ll
total 280
-rw-r--r--  1 yangping.w

おすすめ

転載: yq.aliyun.com/articles/719415
おすすめ