Apacheのスパークデルタ湖のトランザクションログの深い理解
それはようにACIDトランザクション、拡張可能なメタデータの取り扱い、タイムトラベル(時間旅行)とを含むユニバーサルモジュールの最も重要な機能の多くを介して実行されるため、トランザクション・ログは、デルタ湖理解するための鍵です。この記事では、ファイルレベルであるものをトランザクションログ(トランザクションログ)を議論する、それがどのように動作するかで、どのように読み込んで、複数の同時のためのエレガントなソリューションを提供するという問題を書き込みます。
どのようなトランザクションログ(トランザクションログ)です
(もデルタログとして知られている)デルタ湖のトランザクションログが毎回デルタ湖秩序、レコード上のトランザクションテーブルで実行されます。以下の具体的な形態:
[email protected]:/tmp/delta-table/_delta_log|
⇒ ll
total 280
-rw-r--r-- 1 yangping.w