首先,强调一下测试环境:本次测试是在AWS EMR Serverless EMR 6.10
和 6.11
两个版本上进行的,对应的Hudi版本是0.12.2
和0.13.0
,该测试的结论在同版本的开源Spark和Hudi上不一定成立,请知悉。其次,在同一测试环境下,单表的 CDC 数据接入已经测试完毕并发表在:《…》,多表接入的细节汇总在此文中。先说重要结论:
. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .