아파치 스파크 델타 호수 쓰기 데이터 코드 분석 및 구현 원리를 사용하여

아파치 스파크 델타 호수 쓰기 데이터 코드 분석 및 구현 원리를 사용하여

델타 호수 쓰기 데이터는 가장 기본적인 기능이며, 델타 호수 구현 원리의 도입은 다음과 같이가, 특정 사용 사용하는 방법을 살펴 전에 사용과 기존 스파크 쓰기 마루 파일은 기본적으로 동일 :

df.write.format("delta").save("/data/yangping.wyp/delta/test/")
 
//数据按照 dt 分区
df.write.format("delta").partitionBy("dt").save("/data/yangping.wyp/delta/test/")
 
// 覆盖之前的数据
df.write.format("delta").mode(SaveMode.Overwrite).save("/data/ya