コード分析と実装の原則を使用してApacheスパークデルタ湖の書き込みデータ

コード分​​析と実装の原則を使用してApacheスパークデルタ湖の書き込みデータ

デルタ湖の書き込みデータは、その最も基本的な機能であり、その使用および既存のスパークは寄せ木ファイルを書き込むデルタ湖の実装の原則の導入前に、基本的に同じである、それがどのように使われるかを見てみましょう、などの特定の使用は次のとおりです。

df.write.format("delta").save("/data/yangping.wyp/delta/test/")
 
//数据按照 dt 分区
df.write.format("delta").partitionBy("dt").save("/data/yangping.wyp/delta/test/")
 
// 覆盖之前的数据
df.write.format("delta").mode(SaveMode.Overwrite).save("/data/ya

おすすめ

転載: yq.aliyun.com/articles/719419
おすすめ